爬虫之ssh证书警告错误

1.错误信息

错误信息:equests.exceptions.SSLError: ("bad handshake: Error([('SSL routines', 'tls_process_server_certificate', 'certificate verify failed')],)",)           

复制

2.分析

ssh证书是美国网景公司发放的一个安全认证证书，有了这个证书即可证明网站是安全的，但是认证是需要收费的，

所以一些网站就会自己仿造证书，这个时候浏览器就会给予警告，而我们爬虫就爬不到想要的信息

3.解决办法

• 方法一:

  加上一个参数：verify=证书路径，或verify=False

如:

import request
url = 'xxxxx'
req = requests.get(url,verify=False)
print(req.text)           

复制

• 方法二:

ssl._create_default_https_context =ssl._create_unverified_context

#注意用了这个就不能用requests了，得用urllib2.Request

python2中

# 方法二（推荐）：
import ssl
import urllib2

ssl._create_default_https_context =ssl._create_unverified_context
req =urllib2.Request('xxxx')
data =urllib2.urlopen(req).read()
print(data)           

复制

python3中

import ssl
import urllib.request
ssl._create_default_https_context =ssl._create_unverified_context
data =urllib.request.urlopen('xxxx').read()
print(data)           

复制