在数据采集过程中，有时候我们会遇到采集到详情页时需要点击某一按钮之后才能获得数据的情况，本文将为大家介绍如何采集这一类的数据。 第一步：采集列表页数据 输入网址后，软件会自动识别列表上的数据，用户可以在这个基础上对字段进行设置。 点此了解更多如何采集列表页数据 第二步：使用深入采集进入详情页 采集完列表页上的数据后，我们需要采集详情页上的数据，可以选中链接使用深入采集，也可以点击链接直接进入详情页。 点此了解如何使用深入采集功能。 第三步：点击页面上按钮获得采集字段 当遇到详情页信息需要点击才会显示的情况，我们可以…

后羿采集器支持Webhook功能，通过使用该功能，后羿采集器可以将采集到的数据实时发布到用户的HTTP地址，用户需要自行开发Webhook接收端代码。 Webhook的设置在启动任务的设置中，具体如下图所示： 开启Webhook功能之后，采集到的数据将以JSON格式进行发送。在任务采集结束时会发送一个采集结束的事件通知。 Webhook以HTTP POST的方式发送数据到用户的HTTP地址。 HTTP Header为"Content-Type: application/json; charset=utf-8"。 用…

通过使用后羿采集器的API接口功能，您可以通过发送HTTP请求来控制采集任务。 可以支持的功能包括：获取任务列表、获取任务状态、启动任务、停止任务、删除任务、复制任务和清空任务数据。 API接口在软件的设置中心启动，如下图所示：

如果大家在发布到数据库时遇到一些问题，请参考这个教程进行问题排查：发布到数据库常见问题 作为一款真免费的数据采集软件，我们免费提供多种导出方式，如果小伙伴们需要将采集到的数据发布到数据库MongoDB，可以按照以下操作导出。 步骤一： 数据提取完毕后在导出数据界面选择导出到MongoDB数据库选项。 步骤二： 选择本地数据库，可以创建新配置，也可以使用之前配置好的本地数据库。 创建新配置时，我们需要输入本地数据库地址、端口、用户名、密码、数据库名。 如果地址或者密码什么的输入的不对，会出现not-alive的提示，…

如果大家在发布到数据库时遇到一些问题，请参考这个教程进行问题排查：发布到数据库常见问题 作为一款真免费的数据采集软件，我们免费提供多种导出方式，如果小伙伴们需要将采集到的数据发布到数据库PostgreSQL，可以按照以下操作导出。 步骤一： 数据提取完毕后在导出数据界面选择导出到PostgreSQL数据库选项。 步骤二： 选择本地数据库，可以创建新配置，也可以使用之前配置好的本地数据库。 创建新配置时，我们需要输入本地数据库地址、端口、用户名、密码。 如果地址或者密码什么的输入的不对，会出现not-alive的提示…

如果大家在发布到数据库时遇到一些问题，请参考这个教程进行问题排查：发布到数据库常见问题 作为一款真免费的数据采集软件，我们免费提供多种导出方式，如果小伙伴们需要将采集到的数据发布到数据库SQLServer，可以按照以下操作导出。 步骤一： 数据提取完毕后在导出数据界面选择导出到SQLServer数据库选项。 步骤二： 选择本地数据库，可以创建新配置，也可以使用之前配置好的本地数据库。 创建新配置时，我们需要输入本地数据库地址、端口、用户名、密码。 如果地址或者密码什么的输入的不对，会出现Error的提示，此时需要检…

如果大家在发布到数据库时遇到一些问题，请参考这个教程进行问题排查：发布到数据库常见问题 作为一款真免费的数据采集软件，我们免费提供多种导出方式，如果小伙伴们需要将采集到的数据发布到数据库MySQL，可以按照以下操作导出。 步骤一： 数据提取完毕后在导出数据界面选择导出到MySQL数据库选项。 步骤二： 选择本地数据库，可以创建新配置，也可以使用之前配置好的本地数据库。 创建新配置时，我们需要输入本地数据库地址、端口、用户名、密码。 如果地址或者密码什么的输入的不对，会出现Error的提示，此时需要检查是否正确输入地…

在采集的过程中，我们可能会遇到异常停止的情况，如果我们希望再一次启动任务时从上一次停止的位置开始采集，我们需要使用断点续采的功能。 由于各种因素，自动断点续采这个功能现在暂时还无法实现，目前断点续采有两种方案： 1、通过去重功能来进行断点续采 直接在启动任务时进行数据去重设置，选择“当所有字段都重复时，跳过继续采集”。 该方案设置简单，但是效率较低，设置之后任务仍然会从第一页开始采集，然后逐个跳过所有已经采集到的数据。 2、通过修改采集范围、修改网址或添加预操作来进行断点续采 当任务停止时，软件的停止界面上会记录当…

在数据采集过程中，有时候我们会遇到采集到详情页时需要点击某一按钮之后才能获得数据的情况，下面我们给大家介绍一下如何采集这一类的数据。 第一步：采集列表页内容 更多详情内容，请参考以下教程： 如何采集列表类型的网页 第二步：使用深入采集进入详情页 完成列表页数据采集后，如果想要采集详情页上的数据，可以点击深入采集按钮或者点击列表识别结果中任意一个标题，然后在左侧操作栏内点击“依次点击全部元素”按钮，跳转到详情页进行采集。 更多详情内容，请参考以下教程： 如何实现深入采集 第三步：提取详情页数据 跳转到详情页之后，点击…

用户在采集数据时，有时候需要启动很多任务进行采集，这时候如果要一个个启动任务就会花费比较多的时间。为了给用户更好的体验，我们开发出了组批量启动功能，大家只要选中组就可以批量启动任务了。 大家可以把需要采集的任务放在一个分组中，然后展开分组，点击顺序启动组内任务，如下图所示： 注意，需要把组展开才能够批量启动组内任务，未打开分组使用此功能会出现如下报错： 按组批量启动任务后，会跳转到启动页面，此时在启动页面进行的所有设置会应用给组内的每一个任务。 点此了解更多关于采集任务设置的内容。 注意一点，如果在此时勾选加速引擎…