当前位置:
首页 >
知识点讲解一:代理ip中的proxies
发布时间:2025/4/5
44
豆豆
生活随笔
收集整理的这篇文章主要介绍了
知识点讲解一:代理ip中的proxies
小编觉得挺不错的,现在分享给大家,帮大家做个参考.
proxise
proxies的格式是一个字典:{‘http’: ‘http://42.84.226.65:8888‘}
有http与https两种,在爬取不同网站时我们需要选用不同类型的网站时选用不同的proxise,在不知道网站类型时可以将两种类型均放进去,requests会自动选择合适的
proxies = {"http": "http://10.10.1.10:3128","https": "http://10.10.1.10:1080" }- http型:{‘http’: ‘http://42.84.226.65:8888‘}
- https型:{‘https’: ‘http://124.193.37.5:8888‘}
如果你是这样的
proxies = {"http": "http://10.10.1.10:3128" }而你要爬的是https型网站
requests请求可以成功,但是请求使用的将会是你真实的ip地址
如果你是这样的
proxies = {"https": "http://10.10.1.10:1080" }而你要爬的是http型网站
你的requests也可以成功,但是使用的还是你真实的ip地址
只有当你的proxies类型与你想访问的网站类型相同,代理ip才会起作用
可以用以下代码检验你的代理ip是否成功启用
访问 http://icanhazip.com/(https://icanhazip.com/) 可以得到你访问时的ip地址
判断代理是否有效的方法
import telnetlibtry:telnetlib.Telnet('10.10.1.10', port='1080', timeout=3) except:print('ip无效!') else:print('ip有效!')总结
以上是生活随笔为你收集整理的知识点讲解一:代理ip中的proxies的全部内容,希望文章能够帮你解决所遇到的问题。
- 上一篇: 分隔百度百科中的名人信息与非名人信息
- 下一篇: 知识点讲解二:关于requests里的t