【豆瓣】图书评论采集

2023年9月5日 38点热度 0人点赞 0条评论

采集场景

在豆瓣读书短评页面 https://book.douban.com/subject/4011670/comments/ , 采集图书评论信息。

 

采集字段

作品名、有用数、评论时间、评论内容、星级、当前时间、页面网址

 

 

鼠标放到图片上,右键,选择【在新标签页中打开图片】可查看高清大图

下文其他图片同理  

 

采集结果

采集结果可导出为Excel、CSV、HTML、数据库等多种格式。导出为Excel示例:

 

  

教程说明

本篇制作时间:2022/5/27    八爪鱼版本:V8.5.4

如果因网页改版造成网址或步骤无效,无法收集到目标数据,请联系官方客服,我们将及时修正。

 

采集步骤

步骤一:打开网页

步骤二、创建【循环列表】,采集所有图书评论列表中的数据

步骤三、编辑字段

步骤四、创建【循环翻页】,采集多页数据

步骤五、格式化数据

步骤六、启动采集

 

以下为具体步骤:

 

步骤一、打开网页

 

在首页【输入框】中输入目标网址 https://book.douban.com/subject/4011670/comments/ ,点击【开始采集】,八爪鱼自动打开网页。

 

 

特别说明:

a. 打开网页后,如果开始开始【自动识别】,请等待自动识别完成。八爪鱼支持自动识别网页上的列表,滚动和翻页,识别成功后直接启动采集并获取数据。如果【自动识别】的结果不是我们需要的,可点击【取消】关闭智能识别,自行配置采集流程。详情点击查看【自动识别】

b. 示例中输入的的是单个网址 https://book.douban.com/subject/4011670/comments/ ,大家可根据需求进行更换,结构与示例网址相同即可。如果需要批量采集网址,点击查看 批量采集同类网页(URL)教程

365crawadmin

这个人很懒,什么都没留下

文章评论

您需要 登录 之后才可以评论