目录
1.爬取内容
2.代码及解析
1)导入库
2)发送请求
3)解析结果
4)进入视频链接,爬更多内容
搜索关键词:跨年
视频标题、发布时间、视频链接、up主id、up主首页链接
1)导入库
2)发送请求
网址(只需修改文字即可),page为第1页,设置请求头(跳过反爬)
3)解析结果
在B站搜索界面,按F12或者浏览器右上角菜单,可以打开开发者工具然后在网页结构中,鼠标移动到指定位置,左边会有对应的颜色显示,当前网页结构是哪部分内容,然后找到自己想要的内容, 就可以开始解析了
4)进入视频链接,爬更多内容
进入刚才搜索关键词所爬到的,各个视频的链接,然后爬取视频的点赞量、投币量、收藏量、转发量、播放量、弹幕量
5)爬取结果
合并 '在搜索页面爬到的数据' 和 '进入视频链接后爬到的数据'
以下是部分结果展示