对于会更新数据的网站,如果可以通过一个字段判断该网页数据是否更新,则可以编写存储过程来实现,数据库中已有数据的更新,然后新增数据直接插入数据库的功能: 存储过程语句如下: CREATE DEFINER=`root`@`%` PROCEDURE `yhaves`(IN `gaame` VARCHAR(50), IN `plorm` VARCHAR(50), IN `serrea` VARCHAR(200))    LANGUAGE SQL    …

2023年9月4日 0条评论 24点热度 0人点赞 365crawadmin 阅读全文

1.服务器信息 七牛AccessKey以及七牛SecretKey在七牛云的个人中心的秘钥管理可以查看,复制粘贴进入火车采集器对应选项中即可 文件存放区域:根据空间的存储区域选择 七牛空间名称:存储空间的名称 2.上传目录 七牛云的上传目录为  文件下载中的[文件保存目录],仅根据这个目录地址进行传输,其他关于路径的配置不起效。 注意:上传配置中的  文件上传根目录对于七牛云上传路径不起作用,不用填写。

2023年9月4日 0条评论 19点热度 0人点赞 365crawadmin 阅读全文

  sqlite中设置自增ID后,自增ID已经记录,就算清空已经采集的内容,再次采集时,自增ID也是从上一次的ID后递增,想要重置自增ID从零开始,需要按以下步骤设置: (1)首先清空采集所有内容 (2) 在本地编辑数据库的执行sql语句中运行语句即可: UPDATE sqlite_sequence SET seq =0 WHERE name ='Content' 注意:(1)本方法只针对sqlite (2)运行该语句前,需要先清空采集器中已采集数据

2023年9月4日 0条评论 44点热度 0人点赞 365crawadmin 阅读全文

起始网址目前支持四种导入方式,下面介绍数据库导入功能: 数据库导入支持mysql以及sqlserver两种数据库类型, 在使用此功能时需要填写数据库相应的连接信息,以及所需信息所在数据库、表以及列信息。 若所在列需要有where条件查询,如下图,where条件写在数据查询语句中,需要注意的是,不需要写where此关键词,直接写具体条件语句即可

2023年9月4日 0条评论 41点热度 0人点赞 365crawadmin 阅读全文

PHPcms发布模块中 如何获取到全局变量 打开自己的phpcms后台的网站,如图 网址链接后缀hash= 即为全局变量 复制进 即可获取到栏目列表

2023年9月4日 0条评论 38点热度 0人点赞 365crawadmin 阅读全文

1.功能 采集的内容,依据选择条件,进行日期大小的比较,若是不符合设置的条件,则过滤本条采集内容 此功能使用需注意: 1.采集的内容日期格式需符合  日期的格式,任意写格式或者日期是英文状态都无法有效进行判断,并且不能有其他的干扰字符,不然无法进行判断过滤 2.条件可以写固定的日期,也可以使用系统时间 3.也可以依据系统时间来进行时间的加减,来实现固定几天内的时间进行保存 下面举几个常用的使用场景作为示例 ①只保留三天内发布的数据  :首先此标签要采集发布的日期,然后内容过滤如下设置,0|0|-…

2023年9月4日 0条评论 38点热度 0人点赞 365crawadmin 阅读全文