首页 > 技术文章 > Python3网络爬虫-- 使用代理,轮换使用各种IP访问

waterr 2020-12-15 22:47 原文

 

# proxy_list 代理列表
run_times = 100000
for i in range(run_times):
    for item in proxy_list:
        proxies = {
            'http': item,
            'https': item,
        }
        print(proxies)
        try:
            requests.get('目标网站', proxies=proxies, timeout=1)
            print('ok')
        except:
            continue

 

推荐阅读