当有类似下列应用场景: 将甲同学的姓名插入useinfo表,另甲同学有多张图片,需插入pic表,并且要求两表相关联,图片是一张图片插入一行。 那这就要求,pic表可以获得useinfo表中甲同学的自增ID。这种复杂的插入过程,则需要存储过程了。 以上述情况,可使用如下存储过程 BEGINDECLARE po INT DEFAULT 0;DECLARE oid INT DEFAULT 0;DECLARE rid VARCHAR(200) DEFAULT "";  DECLARE rid_…

2023年9月4日 0条评论 71点热度 0人点赞 365crawadmin 阅读全文

将有效的User-Agent放在文本中,然后在火车采集器中调用该文本,即可实现随机调用UA的功能,达到采集时随机更换UA的目的

2023年9月4日 0条评论 78点热度 0人点赞 365crawadmin 阅读全文

   语法测试时提示以上错误提示,是因为程序集没有引用,下面介绍下解决方法: 1.linq程序集 在工具→点击引用,选择system.Linq.dll 2.regularExpressions程序集引用 如上图,观察下程序集的路径,并在浏览选项框中找到该路径,并选择system.dll 然后重新语法测试一下,可以看到一切运行正常。如果之后再显示有程序集缺少,那可以按照system.dll的添加方式来引用下程序集

2023年9月4日 0条评论 58点热度 0人点赞 365crawadmin 阅读全文

  下面介绍下火车采集器二级代理功能,我们按照实际在规则中设置的方式来介绍下如何在火车采集器中使用二级代理列表 1.获取IP 获取ip有三种方式: (1)手动添加:可以手动添加不同类型的IP,并添加用户名密码 (2)文本导入:通过文本导入,文本中IP一行一个保存,然后点击导入按钮保存即可 (3)商业代理IP导入 首先,我们要[点击启用]。然后使用商业代理网站提供的api网址来获取代理IP,一行一个的格式即可,比如如图,在浏览器中打开该网址(这类api是由代理IP网站提供的api接口),可以获取到两个一行一…

2023年9月4日 0条评论 70点热度 0人点赞 365crawadmin 阅读全文

  对于会更新数据的网站,如果可以通过一个字段判断该网页数据是否更新,则可以编写存储过程来实现,数据库中已有数据的更新,然后新增数据直接插入数据库的功能: 存储过程语句如下: CREATE DEFINER=`root`@`%` PROCEDURE `yhaves`(IN `gaame` VARCHAR(50), IN `plorm` VARCHAR(50), IN `serrea` VARCHAR(200))    LANGUAGE SQL    …

2023年9月4日 0条评论 53点热度 0人点赞 365crawadmin 阅读全文

1.服务器信息 七牛AccessKey以及七牛SecretKey在七牛云的个人中心的秘钥管理可以查看,复制粘贴进入火车采集器对应选项中即可 文件存放区域:根据空间的存储区域选择 七牛空间名称:存储空间的名称 2.上传目录 七牛云的上传目录为  文件下载中的[文件保存目录],仅根据这个目录地址进行传输,其他关于路径的配置不起效。 注意:上传配置中的  文件上传根目录对于七牛云上传路径不起作用,不用填写。

2023年9月4日 0条评论 51点热度 0人点赞 365crawadmin 阅读全文

  sqlite中设置自增ID后,自增ID已经记录,就算清空已经采集的内容,再次采集时,自增ID也是从上一次的ID后递增,想要重置自增ID从零开始,需要按以下步骤设置: (1)首先清空采集所有内容 (2) 在本地编辑数据库的执行sql语句中运行语句即可: UPDATE sqlite_sequence SET seq =0 WHERE name ='Content' 注意:(1)本方法只针对sqlite (2)运行该语句前,需要先清空采集器中已采集数据

2023年9月4日 0条评论 64点热度 0人点赞 365crawadmin 阅读全文

起始网址目前支持四种导入方式,下面介绍数据库导入功能: 数据库导入支持mysql以及sqlserver两种数据库类型, 在使用此功能时需要填写数据库相应的连接信息,以及所需信息所在数据库、表以及列信息。 若所在列需要有where条件查询,如下图,where条件写在数据查询语句中,需要注意的是,不需要写where此关键词,直接写具体条件语句即可

2023年9月4日 0条评论 71点热度 0人点赞 365crawadmin 阅读全文

PHPcms发布模块中 如何获取到全局变量 打开自己的phpcms后台的网站,如图 网址链接后缀hash= 即为全局变量 复制进 即可获取到栏目列表

2023年9月4日 0条评论 58点热度 0人点赞 365crawadmin 阅读全文

1.功能 采集的内容,依据选择条件,进行日期大小的比较,若是不符合设置的条件,则过滤本条采集内容 此功能使用需注意: 1.采集的内容日期格式需符合  日期的格式,任意写格式或者日期是英文状态都无法有效进行判断,并且不能有其他的干扰字符,不然无法进行判断过滤 2.条件可以写固定的日期,也可以使用系统时间 3.也可以依据系统时间来进行时间的加减,来实现固定几天内的时间进行保存 下面举几个常用的使用场景作为示例 ①只保留三天内发布的数据  :首先此标签要采集发布的日期,然后内容过滤如下设置,0|0|-…

2023年9月4日 0条评论 65点热度 0人点赞 365crawadmin 阅读全文
123456