采集场景
在微博主页(https://weibo.com/)登录后,循环打开微博博文链接,采集博文链接的一级评论数据。实例地址:https://weibo.com/1977661791/I7PgktlCh 。
采集字段
博主用户名、发布时间、博文内容、转发数、评论数、点赞数、评论人、评论内容、评论时间。
采集结果
采集结果可导出为Excel、CSV、HTML、数据库等多种格式。
教程说明
本篇更新时间:2023/04/20 八爪鱼版本:V8.6.0
如因网页改版导致网址或步骤无效,无法收集到目标数据,请联系官方客服,我们会及时处理。
采集步骤
步骤一:打开网页
步骤二、设置登录微博
步骤三、创建【循环-打开网页】,示范打开多个博文网址
步骤四、提取微博字段
步骤五、创建【循环列表】,提取一级评论列表数据
步骤六、创建循环滚动,以采集更多评论
步骤七、适当设置执行前等待,使采集更稳定
步骤八、启动采集
下面为具体步骤:
步骤一、打开网页
在首页【输入框】中,输入微博主页网址 https://weibo.com/,点击【开始采集】,八爪鱼自动打开网址。微博主页需要向下滚动,才会加载出登录的按钮,所以我们需要在【打开网页】步骤设置滚动,设置路径如下:
【打开网页】,选择【高级设置】,设置【页面滚动】,滚动模式为【全局】,滚动方式为【向下滚动一屏】,【每次间隔】1秒,【滚动次数】为3次,点击应用保存。
特别说明:
a. 设置中的滚动次数和时间间隔,请根据采集需求和网页加载情况进行设置,并非是一成不变的,具体请点击查看处理滚动加载数据的网页教程
文章评论