文章目录
- 1、任务目标
- 2、网页分析
- 3、代码编写
-
- 3.1 代码分析
- 3.2 完整代码
1、任务目标
1、目标网站
:微博文章(https://m.weibo.cn/detail/4813628149072458),这是微博某一篇博文,用于本文测试
2、要求
:爬取该博文下,所有一级评论和二级评论,以及每条评论的作者,最后保存至Excel文件中
2、网页分析
一级评论页面分析:
-
进入网站(https://m.weibo.cn/detail/4813628149072458),由于网站需要登录,我们先用账号登录,然后打开开发者模式,因为pc端网页数据包不好分析,我们可以切换为客户端模式获取数据包
-
刷新网页,因为是异步加载的网站&