【微博】评论采集(只采一级评论)

2023年9月5日 83点热度 0人点赞 0条评论

采集场景

在微博主页(https://weibo.com/)登录后,循环打开微博博文链接,采集博文链接的一级评论数据。实例地址:https://weibo.com/1977661791/I7PgktlCh 。

 

 

采集字段

博主用户名、发布时间、博文内容、转发数、评论数、点赞数、评论人、评论内容、评论时间。

 

采集结果

采集结果可导出为Excel、CSV、HTML、数据库等多种格式。

 

 

 

教程说明

本篇更新时间:2023/04/20 八爪鱼版本:V8.6.0

如因网页改版导致网址或步骤无效,无法收集到目标数据,请联系官方客服,我们会及时处理。

 

采集步骤

步骤一:打开网页

步骤二、设置登录微博

步骤三、创建【循环-打开网页】,示范打开多个博文网址

步骤四、提取微博字段

步骤五、创建【循环列表】,提取一级评论列表数据

步骤六、创建循环滚动,以采集更多评论

步骤七、适当设置执行前等待,使采集更稳定

步骤八、启动采集

 

 

下面为具体步骤:

 

步骤一、打开网页

 

在首页【输入框】中,输入微博主页网址 https://weibo.com/,点击【开始采集】,八爪鱼自动打开网址。微博主页需要向下滚动,才会加载出登录的按钮,所以我们需要在【打开网页】步骤设置滚动,设置路径如下:

【打开网页】,选择【高级设置】,设置【页面滚动】,滚动模式为【全局】,滚动方式为【向下滚动一屏】,【每次间隔】1秒,【滚动次数】为3次,点击应用保存。

 

 

特别说明:

a. 设置中的滚动次数和时间间隔,请根据采集需求和网页加载情况进行设置,并非是一成不变的,具体请点击查看处理滚动加载数据的网页教程

365crawadmin

这个人很懒,什么都没留下

文章评论

您需要 登录 之后才可以评论