代理IP服务地址的常见格式
对于刚接触代理IP的开发者来说，服务地址的格式是第一个需要搞清楚的问题。不同的格式对应着不同的调用方式，用错了自然就无法成功。天启代理这类服务商提供的地址格式，主要有以下几种：
1. IP:Port格式：这是最基础的形式，例如 `123.123.123.123:8888`。如果你的程序支持直接设置代理主机和端口，那么填入这两个部分即可。
2. 完整URL格式：这种格式包含了协议、IP、端口，有时还包含认证信息。它更通用，尤其是在Web浏览器或一些HTTP客户端中。常见的有：
- HTTP协议：`http://123.123.123.123:8888`
- 带认证的HTTP协议：`http://username:password@123.123.123.123:8888`
- SOCKS5协议：`socks5://username:password@123.123.123.123:1080`
3. API接口链接格式：这是目前主流的方式，尤其适用于爬虫等自动化程序。天启代理会提供一个API链接，通过访问这个链接，就能获取到一个或多个新鲜可用的代理IP。其格式类似于：`http://api.tianqiip.com/getip?sign=你的密钥&num=5&type=json`。这种方式动态性强，能有效避免IP因频繁使用而过快失效。
理解这些格式是正确调用的第一步。天启代理的API接口请求时间小于1秒，并能保证IP的高可用率，这为程序的稳定运行打下了基础。
爬虫程序调用代理IP的核心步骤
无论你使用Python的Requests库，还是其他编程语言的HTTP客户端，调用代理IP的逻辑都是相通的。下面我们以最经典的Python `requests` 库为例，详细拆解一下步骤。
第一步：获取代理IP地址
你需要从天启代理的API接口获取IP。假设你的API链接是 `http://api.tianqiip.com/getip`，你可以这样获取：
import requests
def get_proxy():
你的API链接，这里需要替换成天启代理提供给你的真实链接和参数
api_url = "http://api.tianqiip.com/getip?sign=你的密钥&num=1&type=json"
try:
response = requests.get(api_url)
data = response.json()
if data['code'] == 0: 假设返回码0表示成功
假设返回格式为 {"code":0, "data":[{"ip":"1.2.3.4", "port":"8888"}]}
ip_data = data['data'][0]
proxy_ip = f"{ip_data['ip']}:{ip_data['port']}"
return proxy_ip
else:
print("获取代理IP失败:", data['msg'])
return None
except Exception as e:
print("请求API接口异常:", e)
return None
proxy = get_proxy()
if proxy:
print("获取到的代理IP是:", proxy)
第二步：在请求中设置代理
拿到代理IP字符串后，你需要将其构造成`requests`库能识别的代理字典格式。
假设获取到的proxy是 "1.2.3.4:8888"
proxies = {
'http': 'http://' + proxy, 注意这里要加上协议头
'https': 'https://' + proxy
}
如果你的代理需要用户名密码认证（天启代理支持终端IP授权和账号密码授权），格式如下：
proxies = {
'http': 'http://username:password@1.2.3.4:8888',
'https': 'https://username:password@1.2.3.4:8888'
}
try:
response = requests.get('http://httpbin.org/ip', proxies=proxies, timeout=10)
print("通过代理IP请求成功，返回内容:", response.text)
except requests.exceptions.RequestException as e:
print("请求发生错误:", e)
第三步：处理异常和重试
网络请求不可能100%成功，尤其是使用代理时。一个健壮的爬虫必须包含异常处理和重试机制。常见的异常有代理连接超时、代理服务器无响应、目标网站封禁了当前代理IP等。
import time
max_retries = 3
for i in range(max_retries):
proxy = get_proxy()
if not proxy:
print("第{}次获取代理失败，重试...".format(i+1))
time.sleep(2)
continue
proxies = {'http': 'http://' + proxy, 'https': 'https://' + proxy}
try:
response = requests.get('你的目标网址', proxies=proxies, timeout=15)
检查响应状态码，有些网站即使返回200，内容也可能是封禁提示
if response.status_code == 200:
成功，处理数据并跳出循环
print("请求成功！")
break
else:
print("请求返回状态码异常:", response.status_code)
可以视为代理失效，触发重试
raise Exception("状态码异常")
except Exception as e:
print("第{}次请求失败，原因:{}".format(i+1, e))
if i == max_retries - 1:
print("已达到最大重试次数，放弃请求。")
time.sleep(1) 失败后稍作停顿再重试
天启代理的IP可用率高达99%以上，响应延迟低，这能极大减少你的程序因代理问题而重试的次数，提升爬取效率。
构建稳定爬虫的最佳实践
掌握了基础调用方法后，要想让爬虫长期稳定运行，还需要一些技巧。
1. 代理IP池的维护
不要每次请求都去调用一次API获取一个IP，这样效率很低。更好的做法是，一次性从天启代理的API获取一批IP（比如10-20个），放入你自己的程序内存中，形成一个IP池。每次请求随机从池中取一个IP使用。当某个IP连续失败几次后，就将其从池中标记为失效并剔除。设置一个定时任务，定期（比如每分钟）检查IP池中可用IP的数量，当数量低于某个阈值时，自动调用API补充新的IP。
2. 代理IP的轮换与去重
对同一个目标网站频繁使用同一个IP，很容易被识别为爬虫并封禁。需要轮换使用不同的IP。天启代理支持资源自由去重，提供多种去重模式。在你的爬虫程序中，可以实现随机轮换或顺序轮换的策略，让每个请求都尽可能使用不同的IP地址，降低被目标网站反爬规则命中的风险。
3. 健康检查机制
不是所有从API获取的IP在拿到的那一刻都是绝对可用的。可以建立一个简单的健康检查机制：在将IP加入IP池前，先用这个IP去访问一个稳定的、已知可访问的网站（比如`httpbin.org/ip`），如果请求成功且返回的IP地址正是你使用的代理IP，说明这个代理是健康可用的，再将其加入池中。
遵循这些实践，结合天启代理企业级的高性能服务器和分布式集群架构，你的爬虫就能从容应对业务爆发性增长，实现高效稳定的数据采集。
常见问题与解决方案（QA）
Q1: 程序报错，提示代理连接超时（Proxy Error/Timeout），这是什么原因？
A1: 连接超时通常有几个原因：1) 网络波动，到你代理服务器的网络不通畅。2) 代理服务器本身暂时负载过高或出现问题。3) 你本机的防火墙或安全软件阻止了连接。解决方案是：首先确保你的本地网络正常；在代码中实现我们上面提到的重试机制，超时后自动更换下一个IP重试；天启代理拥有自建机房和纯净网络，这类问题发生率较低，如果持续出现，可以联系其专业技术客服寻求支持。
Q2: 为什么使用了代理IP，但目标网站返回的仍然是验证码或封禁页面？
A2: 这并不意味着代理IP本身不可用。原因可能是：1) 你使用的这个IP已经被目标网站标记为“可疑”或“爬虫IP”并拉黑了。2) 你的爬虫行为特征过于明显（如请求频率过高、缺乏User-Agent轮换等）。解决方案是：立即更换一个代理IP（利用IP池轮换）；优化你的爬虫程序，模拟真实用户行为，比如降低请求频率、随机延迟、轮换User-Agent等。天启代理全国200+城市节点，IP资源丰富，为你频繁更换IP提供了资源保障。
Q3: 天启代理支持哪些协议？我的程序应该怎么选？
A3: 天启代理全面支持HTTP、HTTPS和SOCKS5协议。对于绝大多数网页爬虫（HTTP/HTTPS协议的目标网站），使用HTTP或HTTPS代理即可。如果你的程序需要更底层的网络通信（如邮件客户端、游戏、特定TCP/UDP应用），那么SOCKS5代理是更好的选择，它的兼容性更广。在代码设置中，务必确保`proxies`字典里为你目标网址的协议（http或https）设置了正确的代理地址。
