http二级代理新增API请求功能

2023年9月4日 54点热度 0人点赞 0条评论

最新版的采集器中新增加了对于http二级代理的API请求功能,下面介绍一下这个功能如何添加。

首先您需要找到一家代理IP,该代理需提供通过API获取IP的功能,下面来设置http功能

1.打开http二级代理服务器,点击批量导入。

2.点击添加按钮。直接将生成的API地址放入火车采集器地址栏处(图中画圆圈处)注意,生成的API必须是json格式,若是提供的默认正则格式不能正确获取到代理,那么需要您根据获取的Ip格式重新编写匹配正则表达式

3.勾选开启定时刷新,设置好时间后采集器会定时请求API来获取最新的IP地址。点击导入,这样API就设置好了。若是不是长时间采集,则不需要勾选这个选项。

4.点击导入后,会根据事先设置选项设置(注1)来自动验证IP是否通过,然后在火车采集器采集规则中设置调用http中的代理即可,如图的接口是自动调用你在http代理服务器中的设置,不必修改。

注意:添加过的API地址在9.6之前的版本是不能再次编辑的,9.6之前的版本如果需要更换请手动删除所有的IP后重新添加。

注1:选项设置解释:http://www.locoy.com/index/guide#%E4%BB%A3%E7%90%86%E8%AE%BE%E7%BD%AE.html

365crawadmin

这个人很懒,什么都没留下

文章评论

您需要 登录 之后才可以评论