请输入
菜单

代理IP

在使用八爪鱼采集器的过程中,是否遇到这样的情况:
①明明是同一个采集任务,为什么之前采集没问题,近期却无法采集数据呢?
②自己采集频率比较高,网站识别到数据爬取,中途频繁需要验证,造成采集效果不佳;或者直接封号!
③本地采集没有问题,为何云采集爬取不到数据呢?
如果以上问题困扰着您,可以使用我们的代理IP功能。

一、介绍

1、基本概念

IP地址作为网络设备的唯一标识,使得网络中的设备能够相互识别和通信,在互联网中,IP地址用于确定数据包的发送和接收路径。每个网络设备的公共IP是独一无二的。
代理IP则不使用本设备IP,通过第三方服务器中转网络请求。
 

2、功能与用途

数据采集防封:隐藏真实IP,避免因频繁访问被目标网站识别并封禁IP,适用于电商、新闻等需高频采集的网站。
隐私保护 :隐藏用户真实网络地址,防止被追踪。
访问限制内容 :突破地域限制,访问仅特定区域可浏览的内容。
防止账号风控:规避同一IP多账号登录导致的封号风险。
提高采集效率:通过使用多个代理IP同时访问目标网站,可以减少爬取时间和资源消耗。(云采集多节点的IP均不相同)
 

3、 收费与查询

收费规则:按个数计费,单价0.04元/个(切换一个IP即扣除1个),仅限个人版、团队版、企业版用户使用。
充值:客户端内直接充值余额,按使用量实时扣除。
查询消耗记录 方式1:进入官网(八爪鱼采集器官网),登录自己账号。点击消耗记录。选择代理ip即可查看。
 
 
方式2:点击任意任务设置,智能防封模块下在代理ip选项中点击“查看使用记录”跳转查看。
特别说明:
a. 剩余IP个数是作为资源由内部发放(常规渠道无法获得),个人充值余额后此处是不会显示有具体个数变化的。使用代理IP是实时从余额处扣除费用(即用多少扣多少),所以关注余额变化即可。
 b.收费0.04元一条是IP收费,并非使用代理IP而采集到的数据费用。
 

二、配置展示

购买代理IP后,支持 云采集本地采集 两种场景配置,具体方法如下:

1、智能防封设置

操作路径:任务编辑界面 → 【智能防封】功能模块。
配置说明:可设置代理IP切换频率(如1分钟、5分钟等),系统将按设置的时间自动轮换代理IP,降低被封概率。
特别说明:
a. 若网站封禁较严(如频繁触发反爬机制),建议设置30秒至1分钟的短周期切换。
b.若网站封禁较松,可设置10分钟的长周期切换,以减少IP消耗。
c.建议初始测试采用10分钟切换周期,若采集效果不佳(如数据不完整),再逐步缩短至最短30秒。
 

2、任务步骤重试设置

操作路径:任务的【打开网页】【点击元素】等步骤 → 高级设置旁的“重试选项”。
配置说明:根据网页反爬强度,在重试时选择“使用代理IP”,适用于需精准控制某一步骤代理的场景。
 
特别说明:
a.重试如何配置:自动重试
 
本地采集自定义代理(仅HTTP类型)
操作路径:本地采集任务设置 → 自定义代理IP输入框。
输入格式:代理IP:端口(如“123.45.67.89:8080”)。
 
特别说明:
a.自定义代理仅支持本地采集,需确保代理IP有效且未被封禁。
 

3、效果说明展示

采集背景
以模板“豆瓣评论采集【影评、书评】”为例,此平台在采集数据较多时会出现卡顿,所以采集效率会大打折扣,甚至出现采集中途手动验证或者网站崩溃的情况,导致任务终止。
 
采集结果(不使用代理ip)
特别说明:
a.此处为网站崩溃的情况演示。
配置任务
①输入相关参数
②输入翻页次数
③开启任务
 
效果对比
在参数配置处开启代理IP配置
 
测试效果:
特别说明:
a.使用代理IP后。相较于不开启配置,采集时间更短,同时数量更多,任务也更稳定。
 b.任务概况处可以看本次任务具体消耗多少代理IP。
 
 
 
 
 
 
作者:YfY
上一个
本地加速同时运行任务
下一个
定时任务(本地+云)
最近修改: 2025-11-18