python库requests关于证书认证VerifiedHTTPS的问题

问题本身好解决也不好解决,多次遇到,记录一笔

1. verify= False 即可解决前部分事

2.出现 InsecureRequestWarning 警告 这是因为忽视证书导致的,不影响代码,说是这样说

解决参考:https://blog.csdn.net/M1mory/article/details/56029638

from requests.packages.urllib3.exceptions import InsecureRequestWarning
requests.packages.urllib3.disable_warnings(InsecureRequestWarning)

网上还有个取消urllib警告 requests.packages.urllib3.disable_warnings()

3.

当请求有https问题时出现max最大值问题,猜测可能是被反爬虫或者按照网上说的链接没有释放(待定)

4.这个问题也是今天优化proxypool发现的

用https代理不能爬取https。。。

其他均可:http爬取 https,http爬取http,https爬取http

https可以用http写法,也可以进行代理请求

2019.6.6