【搜狗微信】文章列表和详情页正文采集

2023年9月5日 39点热度 0人点赞 0条评论

采集场景

进入搜狗微信首页,(https://weixin.sogou.com/),采集【热门】分类下的文章列表数据。同时,点击每一篇文章的链接,进入文章详情页,采集文章正文和图片。

 

采集字段

标题、文章链接、封面图、简介、来源、发布时间、正文、图片链接。

 

 

 

鼠标放到图片上,右键,选择【在新标签页中打开图片】可查看高清大图

下文其他图片同理

  

采集结果

采集结果可导出为Excel、CSV、HTML、数据库等多种格式。导出为Excel示例:

 

 

教程说明

本篇制作时间:2020/4/24    八爪鱼版本:V8.1.8

如果因网页改版造成网址或步骤无效,无法收集到目标数据,请联系官方客服,我们将及时修正。

 

采集步骤

步骤一:打开网页并使用【智能识别】

步骤二、调整使用【智能识别】生成的采集流程

步骤三、点击文章链接进入详情页,采集正文和图片

步骤四、启动采集

 

以下为具体步骤:

 

步骤一、打开网页并使用【智能识别】

 

在首页【输入框】中输入目标网址 https://weixin.sogou.com/,点击【开始采集】,八爪鱼自动打开网页。

点击【自动识别网页】,成功识别了文章列表中的数据和翻页。

点击【生成采集设置】,将自动识别出的列表数据和翻页,生成为采集流程,方便我们使用和修改。

 

 

特别说明:

a. 本文使用【自动识别】,自动识别网页上的列表、滚动和翻页。识别成功后会生成采集规则,再对采集规则调整,以采集目标数据。如果【自动识别】的结果与以上图片不同,可点击【取消识别】自行配置采集流程或联系客服反馈。详情点击查看 【自动识别】教程

365crawadmin

这个人很懒,什么都没留下

文章评论

您需要 登录 之后才可以评论