python3爬虫之如何使用浏览器cookie-创新互联
小编给大家分享一下python3爬虫之如何使用浏览器cookie,希望大家阅读完这篇文章后大所收获,下面让我们一起去探讨吧!
以网页提取标题为例
>>> import re >>> get_title = lambda html: re.findall('(.*?) ', html, flags=re.DOTALL)[0].strip()
未登录情况下下载得到的标题:
>>> import urllib2 >>> url = 'https://bitbucket.org/' >>> public_html = urllib2.urlopen(url).read() >>> get_title(public_html) 'Git and Mercurial code management for teams'
使用第三方库browsercookie,获取cookie再下载:
>>> import urllib.request >>> public_html = urllib.request.urlopen(url).read() >>> opener = urllib.request.build_opener(urllib.request.HTTPCookieProcessor(cj))
看完了这篇文章,相信你对python3爬虫之如何使用浏览器cookie有了一定的了解,想了解更多相关知识,欢迎关注创新互联行业资讯频道,感谢各位的阅读!
本文名称:python3爬虫之如何使用浏览器cookie-创新互联
地址分享:http://myzitong.com/article/dpogeg.html