Python之urllib学习Cookie

2019-03-08  本文已影响0人  见字如晤一

Cookies的处理需要相关的Handler
下面演示一下,如何将网站的Cookies获取下来,相关代码入下:

# urllib Cookie设置的高级用法,主要是通过Handler实现
import urllib.request
import http.cookiejar
cookies=http.cookiejar.CookieJar()
handler= urllib.request.HTTPCookieProcessor(cookies)
opener=urllib.request.build_opener(handler)
response = opener.open("http://www.zhihu.com")
for item in cookies:
    print(item.name+'='+item.value)

打印输出:

_xsrf=AlZV0zUKwpdESr0a5NiskMdbQQLSnWiJ
_zap=2cbcb5ad-126a-480c-90d5-13a8c28b04a5
tgw_l7_route=4860b599c6644634a0abcd4d10d37251

上面代码是将cookies信息直接打印输出,那如何将cookies信息保存到文件中呢,实现保存有两种格式,一种是Mozilla格式、另一种是LWP格式

下面演示保存为Mozilla格式,生成的文件名为cookies.txt

# urllib Cookie设置的高级用法,保存为具体文件,Mozilla格式
import urllib.request
import http.cookiejar

cookies = http.cookiejar.MozillaCookieJar('cookies.txt')
handler = urllib.request.HTTPCookieProcessor(cookies)
opener = urllib.request.build_opener(handler)
response = opener.open("http://www.zhihu.com")

cookies.save(ignore_discard=True, ignore_expires=True)
# 使用要点,http.cookiejar/urllib.request.HTTPCookieProcessor/urllib.request.build_opener

最终运行生成了文件


image.png

内容格式为:


image.png

另外一种格式为LWP格式

# urllib Cookie设置的高级用法,保存为具体文件,LWP格式
import urllib.request
import http.cookiejar

cookies = http.cookiejar.LWPCookieJar('cookies1.txt')
handler = urllib.request.HTTPCookieProcessor(cookies)
opener = urllib.request.build_opener(handler)
response = opener.open("http://www.zhihu.com")

cookies.save(ignore_discard=True, ignore_expires=True)
# 使用要点,http.cookiejar/urllib.request.HTTPCookieProcessor/urllib.request.build_opener

生成的文件格式为:


image.png

好了,以上演示完保存cookies到具体文件!!下面演示如果载入保存好的cookies文件

载入已保存的cookies文件

保存为文件格式后,如何加载这个cookie文件呢:
cookies.load('cookies1.txt',ignore_expires=True,ignore_discard=True)

# urllib Cookie设置的高级用法,将具体文件LWP格式的cookie载入后发起请求
import urllib.request
import http.cookiejar

cookies = http.cookiejar.LWPCookieJar()
cookies.load('cookies1.txt',ignore_expires=True,ignore_discard=True)
handler = urllib.request.HTTPCookieProcessor(cookies)
opener = urllib.request.build_opener(handler)
response = opener.open("http://www.zhihu.com")
print(response.read().decode('utf-8'))
# 使用要点,http.cookiejar/urllib.request.HTTPCookieProcessor/urllib.request.build_opener
######################################################
上一篇下一篇

猜你喜欢

热点阅读