首页
注册
登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请
登录
V2EX
›
mee
›
全部回复第 1 页 / 共 1 页
回复总数
4
2015-12-15 15:23:28 +08:00
回复了
JhOOOn
创建的主题
›
Python
›
如何验证一个代理的好坏呢?
我之前做爬虫的时候使用代理,也遇到了这个问题,用爬虫得到的大部分代理,统统将页面重定向到了百度,只有一小部分是可以直接用的,因此我就需要去验证哪一部分不可用将其剔除,我采用的方法是这样的.
1.使用代理取请求一个普通的网页(不要是百度这样的,最好具体的网页),判断得到的状态码是否 OK
2.判断请求得到的网页内容是否跟你通过浏览器得到的网页内容相同(可以通过判断里面的一些特殊字符串判断)
关于
·
帮助文档
·
博客
·
API
·
FAQ
·
实用小工具
·
3584 人在线
最高记录 6679
·
Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 12ms ·
UTC 04:41
·
PVG 12:41
·
LAX 20:41
·
JFK 23:41
Developed with
CodeLauncher
♥ Do have faith in what you're doing.