1、什么样的网页是列表类型的网页 列表类型的网页是具有相同元素的内容页按照一定的线性顺序排列分布的网页，如下图所示： 2、如何采集列表类型的网页 在智能模式下，后羿采集器默认按照列表类型的网页进行智能识别，并完成页面列表元素内部所有字段的自动识别和采集。 如果后羿采集器自动识别的结果不符合您的需求，您可以手动点选列表。 （1）软件自动识别列表元素内部字段并进行采集 （2）手动点选列表 关于采集字段的设置可以看这里→_→ 如何对采集字段进行配置

后羿采集器的智能模式的强大之处在于它不仅可以采集单页类型和列表类型的网页，还能够支持采集列表页+详情页的网页类型。 下面我们来详细介绍一下如何采集采集列表页+详情页内容。 第一步：采集列表页内容 更多详情内容，请参考以下教程： 如何采集列表类型的网页 第二步：深入采集 在第一步中，软件会识别出列表内容中的链接，用户也可以通过手动设置提取到链接，在此基础上，我们如果需要采集到链接对应的详情页的内容，需要用到深入采集功能。 更多详情内容，请参考以下教程： 如何设置深入采集 第三步：设置详情页数据 详情页的采集和单页类型…

在数据采集过程中，有时候我们会遇到采集到详情页时需要点击某一按钮之后才能获得数据的情况，下面我们给大家介绍一下如何采集这一类的数据。 第一步：采集列表页内容 更多详情内容，请参考以下教程： 如何采集列表类型的网页 第二步：使用深入采集进入详情页 完成列表页数据采集后，如果想要采集详情页上的数据，可以点击深入采集按钮或者点击列表识别结果中任意一个标题，然后在左侧操作栏内点击“依次点击全部元素”按钮，跳转到详情页进行采集。 更多详情内容，请参考以下教程： 如何实现深入采集 第三步：提取详情页数据 跳转到详情页之后，点击…

我们通过创建【循环列表】去采集多个列表或详情页的数据。创建【循环列表】的方式在 新手入门系列课程 中有详细讲过。     一般情况下，通过以上方法创建的【循环列表】不会出错，能够精准采集到全部数据。 但有时候我们点击了列表页某一项数据之后，点击“选中全部”，但是循环定位到的数据并没有包含咱们要的所有数据项，这个时候可以通过手动修改xpath，让循环定位到咱们所有需要的数据， 这就是我们本节课所要讲的内容。   实例网址：https://www.haodf.com/hospital/list.html   基础操作：…

在数据采集过程中，有时候我们会遇到采集到详情页时需要点击某一按钮之后才能获得数据的情况，本文将为大家介绍如何采集这一类的数据。 第一步：采集列表页数据 输入网址后，软件会自动识别列表上的数据，用户可以在这个基础上对字段进行设置。 点此了解更多如何采集列表页数据 第二步：使用深入采集进入详情页 采集完列表页上的数据后，我们需要采集详情页上的数据，可以选中链接使用深入采集，也可以点击链接直接进入详情页。 点此了解如何使用深入采集功能。 第三步：点击页面上按钮获得采集字段 当遇到详情页信息需要点击才会显示的情况，我们可以…

我们通过创建【循环列表】去采集多个列表或详情页的数据。创建【循环列表】的方式在 新手入门系列课程 中有详细讲过。     一般情况下，通过以上方法创建的【循环列表】不会出错，能够精准采集到全部数据。但有时候也会遇到一些问题：比如列表中有的部分不是我们想要的，需要进行丢弃。   这时候，可以手动修改XPath去定位列表丢弃不需要的部分。也可以用分支判断丢弃。     以下通过实例进行说明。   实例网址：https://weibo.com/2803301701?refer_flag=1001030103_     一…

1、什么样的网页是列表类型的网页 列表类型的网页是具有相同元素的内容页按照一定的线性顺序排列分布的网页，如下图所示： 2、如何采集列表类型的网页 1）软件可以准确识别列表的情况 点击列表中的任一行，软件会自动识别出列表并给出提示，选择“提取列表中的数据”。 软件会自动识别当前页面的分页按钮，我们可以根据提示设置自动翻页操作。 更多详情内容，请参考以下教程： 如何设置分页

我们通过创建【循环列表】去采集多个列表或详情页的数据。创建【循环列表】的方式在 新手入门系列课程 中有详细讲过。   一般情况下，通过以上方法创建的【循环列表】不会出错，能够精准采集到我们想要的全部数据。但有时候也会遇到一些问题：比如滚动后加载出100个列表，为什么只采集到20个？有一些列表并不是我们需要的，如何将其排除掉？ 页面本来有30条列表，为什么却只能采集到10条？   这时候，就需要手动修改XPath去精准定位列表。   以下通过实例进行说明。   实例网址：https://www.made-in-chi…

本教程主要给大家介绍如何使用后羿采集器的流程图模式采集列表页+详情页的数据。 第一步：采集列表页内容 更多详情内容，请参考以下教程： 如何采集列表类型的网页 第二步：深入采集 在第一步的基础上，如果我们需要采集详情页的数据，可以使用深入采集功能。 更多详情内容，请参考以下教程： 如何实现深入采集 第三步：设置详情页数据 详情页的采集和单页类型的采集方式是一样的。 更多详情内容，请参考以下教程： 如何采集单页类型的网页 第四步：启动采集任务 字段设置完毕后便可以开始进行采集任务的设置和启动。 更多详情内容，请参考以下…

采集场景 在百度地图首页（https://map.baidu.com）输入【城市+关键词】搜索，采集搜索结果列表页。示例中关键词为【深圳 火锅】，可根据需求进行更换，同时支持自动批量输入多个关键词。   采集字段 搜索关键词、商家名称、人均、地址等。     鼠标放到图片上，右键，选择【在新标签页中打开图片】可查看高清大图 下文其他图片同理   采集结果 采集结果可导出为Excel，CSV，HTML，数据库等多种格式。导出为Excel示例：     教程说明 本篇制作时间：2022/6/16    八爪鱼版本：V8…