问题： 发布到数据库报错怎么办？ 回答： 1. 连接问题总结 1）宝塔控制面板 使用此管理工具时需要注意mysql数据库访问权限设置，和远程访问端口的开放。 2） localhost、192.168.xxx.xxx 使用此类主机地址需要注意是本机需要开启MySQL服务 3）不确定报错详请 可使用navicat先确定具体报错详情 2. 字段映射问题总结 1）字段类型 仅支持数据表中字符串和整型字段的映射（如果需要映射日期字段，需要将数据表中对应字段改成字符串类型） 2）字段长度 需要注意字段长度是否可以满足本地采集的…
在智能模式中，后羿采集器会默认按照列表类型进行识别，如果您输入网页属于单页类型，此时的页面类型识别结果肯定是不正确的；或者由于网页加载速度等其他原因，即使您输入的网页是列表类型，也可能出现识别失败的情况，此时您可以手动设置页面类型。 关于单页和列表页的介绍请参考以下教程： 什么是单页类型的网页？如何采集？ 什么是列表类型的网页？如何采集？ 分页设置的过程如下： “页面类型”的设置菜单如下图所示。 如果是单页类型的网页，您可以直接选择“单页类型”。 如果是列表类型的网页，您可以点击“自动识别”，软件会重新尝试识别列表…
在流程图模式下，提取数据组件会将用户需要的数据提取出来，用户可以在这个组件内对采集字段进行设置。提取数据用于提取采集网页中的数据，该组件既可以单独使用也可以和循环组件或者判断组件搭配使用。单独使用时适合提取单页上的数据，搭配使用时，适合提取所有页面上的数据。 具体设置介绍如下： 1、修改字段名称 2、合并字段 合并字段有两种办法，一种是点击一条需要合并的字段，右击选择“合并字段”，然后在页面中选择需要合并的字段，这种方式适合两个字段的合并。在合并字段中，用户可以设置两个字段内容之间的分隔符，如果不需要分隔符，在分隔…
如果大家在发布到数据库时遇到一些问题，请参考这个教程进行问题排查：发布到数据库常见问题 作为一款真免费的数据采集软件，我们免费提供多种导出方式，如果小伙伴们需要将采集到的数据发布到数据库SQLServer，可以按照以下操作导出。 步骤一： 数据提取完毕后在导出数据界面选择导出到SQLServer数据库选项。 步骤二： 选择本地数据库，可以创建新配置，也可以使用之前配置好的本地数据库。 创建新配置时，我们需要输入本地数据库地址、端口、用户名、密码。 如果地址或者密码什么的输入的不对，会出现Error的提示，此时需要检…
启动任务设置完毕之后，我们点击“启动”按钮。 然后会打开任务运行界面，在这个界面上我们可以查看网页、查看运行日志、查看采集结果、开启自动导出、开启加速、暂停任务或者停止任务。 1、查看网页 点击页面上的“查看网页”按钮，可以在新打开的窗口中查看当前正在采集的网页。 在这个界面中，我们点击右上角的保存按钮，可以把这个网页保存下来，一般用于需要保存当前网页来排查遇到的问题。 2、运行日志 点击“运行日志”可以查看当前任务的运行状态。 3、查看采集结果 点击“数据”可以预览当前任务的部分采集结果。 4、暂停 点击“暂停”…
在数据采集的时候，经常会需要倒序采集（从最后一页开始往前采集数据）的情况。本文将简单说明如何使用后羿采集器的流程图模式进行网页数据的倒序采集。 情况一：列表页翻页后，链接改变，存在最后一页链接 处理方式一：将列表页最后一页链接作为采集链接 当我们能够直接拿到网站最后一页的链接时，可以通过直接复制链接的形式，用最后一页的链接来创建采集任务。 1. 在浏览器里点击到最后一页，复制最后一页的链接。 2. 创建一个流程图模式采集任务。 3. 流程图模式识别到列表后软件会提示是否需要识别下一页按钮，根据操作提示，手动点选识别…
八爪鱼采集到的数据，支持导出到Mysql数据库中。可手动导出，也按照设置的定时导出计划，自动导出。 本教程将以云采集数据，演示手动/自动导出到Mysql数据库中的具体步骤。 一、手动导出具体步骤 在任务采集完毕之后，将采集得到的数据，手动导出到数据库中。 本地采集和云采集数据，均可手动导出。 Step1：先在您的Mysql中，建好数据库和数据表。 Step2：在【我的任务】中，将鼠标移动到任务上，任务采集状态右侧会出现全部按钮，点击即可进入查看采集到的数据，这里点击云采集右侧的全部，查看全部云采集数…
在学习本教程之前，您需要具备八爪鱼基础操作和XPath相关知识，如果还未掌握，请先学习以下课程。 自定义模式入门：https://www.bazhuayu.com/tutorial8/xsrm/81zdyrm XPath 系统学习与实例：https://www.bazhuayu.com/tutorial8/81xpath 一、相对XPath 相对Xpath，即相对于循环框的Xpath，有两个典型特征：跟随循环联动；与循环框的XPath合并成一条完整的定位XPath。 有两种常见应用场景：提取循环内的数据；提取循…
采集场景 在携程网点击【攻略】-【游记】，采集【游记】类目下的游记内容。 示例网址：https://you.ctrip.com/travels/chengdu104/3966766.html https://you.ctrip.com/travels/henan100058/3968107.html 采集字段 页面地址、发表时间、标题、喜欢数、评论数、浏览数、城市、天数、时间、人均、和谁、游记目录、游记正文 点击查看高清大图，下文其他图片同理 采集结果 采集结果可导出为…
