后羿采集器支持批量生成网址功能，即通过设置一定的规则，自动生成您需要的网址，智能模式和流程图模式的具体设置位置相同，在新建采集任务界面中，如下图所示： 批量生成网址一般用于多网址采集的场景，这里又可以分为两种情况： 第一种：当网页中没有翻页按钮时，这种情况下无法通过点击翻页按钮进行循环翻页采集，这种网站各个分页的网址一般都只有部分参数（例如页面编号）不同，因此可以通过使用批量生成网址功能来一次性生成所有的分页网址，然后按照多网址进行采集。 第二种：当你需要采集多个网址，但是这些网址是符合一定的规则的，那么就可以通过…

八爪鱼是基于网址进行数据采集的。支持从本地文件导入网址、根据规律批量生成网址、从已有任务导入网址   一、从本地文件导入网址 新建【自定义任务】，选择从【文件导入】，再选择已有的网址文件，就可以大批量导入。导入之后，可以预览前100条网址。 再点击【保存设置】，即可开始任务配置。     注意： ① 支持csv、xls、xlsx、txt文件格式批量导入网址 ② 支持100w以内网址 ，超过的自动删除   二、批量生成网址 网址中一般有很多参数，根据网址参数的变化规律，可批量生成网址。   1、网址参数中出现数字变化…

问题： 网址禁止访问 / 报错404、502了怎么办？ 回答： 禁止访问 / 报错404、502一般都是对方网站针对你的访问进行的限制，建议是重启路由器或者换一个网络进行访问，比如说用手机热点进行连接，或者切换一个IP进行访问。

用户在创建任务的时候，首先要输入正确的网址，采集器上的输入框和一般的浏览器搜索框不同，需要输入网址而不能直接输入文字。 用户在输入网址的时候，不要直接输入首页的网址，要输入搜索结果页的网址。 例如： 如果用户要采集后羿采集器上文档教程的内容，如果直接输入后羿采集器首页的网址，那我们是采集不到文档教程的内容的。 我们需要复制的是展示了采集对象的页面的网址，才能采集到具体内容，如下图所示的网址。   【温馨提示】以上建议仅针对第一次使用的新手用户，并不代表后羿采集器的智能模式无法从首页开始采集，如果从首页开始…

在智能模式中，如果需要修改网址，可以在任务编辑界面点击右上角的网址编辑按钮，进行网址修改。 点击按钮后会打开网址修改界面，软件支持三种网址修改方式，具体如下： 1、手动输入修改网址 2、文件导入修改网址 3、批量生成网址 更多详情内容，请参考以下教程： 如何批量生成网址

在流程图模式中，如果需要修改网址，可以在任务编辑界面点击右上角的网址编辑按钮，进行网址修改。 点击按钮后会打开网址修改界面，软件支持三种网址修改方式，具体如下： 1、手动输入修改网址 2、文件导入修改网址 3、批量生成网址 更多详情内容，请参考以下教程： 如何批量生成网址

起始网址目前支持四种导入方式，下面介绍数据库导入功能： 数据库导入支持mysql以及sqlserver两种数据库类型， 在使用此功能时需要填写数据库相应的连接信息，以及所需信息所在数据库、表以及列信息。 若所在列需要有where条件查询，如下图，where条件写在数据查询语句中，需要注意的是，不需要写where此关键词，直接写具体条件语句即可

获取当前采集页的网址，可以按下面设置， 正则提取规则为： ^(?<content>[\s\S]*?)$ 

  区间变化的变化原理为：地址中的两个参数以固定的间隔进行增长，并且相邻两组值的结束值与起始值间隔为1，以这种形式变化增长的地址格式可以使用区间变化来处理。 比如以https://www.powerchina.cn/col/col7440/index.html?uid=46098&pageNum=1，网址为例，我们使用fiddler抓包网址变化如下： 第一页：https://www.powerchina.cn/module/web/jpage/dataproxy.jsp?startrecord=1…