python3爬虫之如何使用浏览器cookie

小编给大家分享一下python3爬虫之如何使用浏览器cookie,希望大家阅读完这篇文章后大所收获,下面让我们一起去探讨吧!

在港南等地区,都构建了全面的区域性战略布局,加强发展的系统性、市场前瞻性、产品创新能力,以专注、极致的服务理念,为客户提供成都网站建设、做网站 网站设计制作按需搭建网站,公司网站建设,企业网站建设,成都品牌网站建设,成都全网营销推广,成都外贸网站建设,港南网站建设费用合理。


以网页提取标题为例

>>> import re

>>> get_title = lambda html: re.findall('(.*?)', html, flags=re.DOTALL)[0].strip()

未登录情况下下载得到的标题:

>>> import urllib2

>>> url = 'https://bitbucket.org/'

>>> public_html = urllib2.urlopen(url).read()

>>> get_title(public_html)

'Git and Mercurial code management for teams'

使用第三方库browsercookie,获取cookie再下载:

>>> import urllib.request

>>> public_html = urllib.request.urlopen(url).read()

>>> opener = urllib.request.build_opener(urllib.request.HTTPCookieProcessor(cj))

看完了这篇文章,相信你对python3爬虫之如何使用浏览器cookie有了一定的了解,想了解更多相关知识,欢迎关注创新互联行业资讯频道,感谢各位的阅读!


本文名称:python3爬虫之如何使用浏览器cookie
文章路径:http://cdiso.cn/article/ijdjdg.html

其他资讯