文章内容
2017/12/26 11:30:01,作 者: 黄兵
爬虫 https python
import urllib
import lxml.html
import csv
import codecs
import sys
import requests
import requests.packages.urllib3.util.ssl_
requests.packages.urllib3.util.ssl_.DEFAULT_CIPHERS = 'ALL'
reload(sys)
sys.setdefaultencoding('utf8')
for page in range(1,63):
res = requests.get('http://pdf-lib.org/api/zhihu?CurrentPage={0}&PageSize={1}'.format(page,8)).text
# con = urllib.urlopen('http://pdf-lib.org/api/zhihu?CurrentPage={0}&PageSize={1}'.format(page,8)).read()
print res
之后我们看一下抓取的截图：
这样是可以正常解析 HTTPS 的 Response 的
Requests的详细文档查看这里：快速上手
评论列表