【雪球】热帖评论采集

2023年9月5日 32点热度 0人点赞 0条评论

采集场景

打开雪球网 https://xueqiu.com/,页面显示雪球热帖列表,点击每一个帖子的标题可进入详情页,查看并采集详情页里面的数据内容。

 

采集字段

帖子作者、标题、文章内容、发布时间、评论数、评论者、评论内容、评论时间等。

 

点击查看高清大图,下文其他图片同理  

 

采集结果

采集结果可导出为Excel、CSV、HTML、数据库等多种格式。导出为Excel示例:

 

 

教程说明

本篇制作时间:2022/6/10  八爪鱼版本:V8.5.2

如果因网页改版造成网址或步骤无效,无法收集到目标数据,请联系官方客服,我们将及时修正。

 

采集步骤

步骤一:打开网页

步骤二、设置页面滚动和【点击加载更多】

步骤三、创建【循环列表】

步骤四、采集详情页的文章标题、正文等字段

步骤五、创建评论部分的【循环列表】,采集全部评论内容、评论者等字段

步骤六、编辑字段

步骤七、设置执行前等待

步骤八、启动采集

 

 

以下为具体步骤:

 

步骤一、打开网页

 

在首页【输入框】中输入目标网址https://xueqiu.com/,点击【开始采集】,八爪鱼自动打开网页。

 

 

特别说明:

a. 打开网页后,如果开始开始【自动识别】,请点击【不再自动识别】或【取消识别】将其关掉。因为本文不适合使用【自动识别】。

b. 【自动识别】适用于自动识别网页上的列表、滚动和翻页,识别成功后直接启动采集即可获取数据。详情点击查看 【自动识别】教程

365crawadmin

这个人很懒,什么都没留下

文章评论

您需要 登录 之后才可以评论