Python爬虫开发-04--创建一个容器存放Cookie

关注

原创最新推荐文章于 2026-05-23 17:41:59 发布 410 阅读 AI 写同款· GEO 优化 ›

如何把Python应用构建为Docker容器现在云原生越来越流行, 容器化势在必行, 作为一个开发人员，多多少少也要接触一些容器相关的操作，其中最基础的操作是如何把自己的应用构建为一个Docker容器，并管理。本文以starlette框架和后台的开发常见3件套Nginx，MySQL和Redis为底创建一个简单的Web后台演示项目, 并一步一步介绍如何编写成一个容器以及容器的运行。 1.创建项目第一步会先创建一个Python后台项目，这个项目包含3个接口，一个接口用来测试服务是否正常，另外一个是测试MySQL... 阅读详情

# encoding: utf-8
import urllib
import urllib2
import cookielib

'''
许多网站资源获取需要用户登录，登录后再次访问就不需要再次输入账号密码等信息了。
那么这个功能网站是如何实现的呢？
	一般的，用户登录之后，服务器会为该用户创建一个Session，Session相当于用户的私人档案，也可以等同于用户；
那么到底哪一次访问时输入该用户的呢？其实在登录的时候，浏览器存储了一个Session ID的Cookie值，每一次访问都带上该Cookie值，
服务器将Cookie值中的Session ID与服务器中的Session ID进行对比就可以得知请求访问资源的是哪一个用户了。

		其中，urllib2对Cookie的处理是自动的，使用CookieJar函数进行Cookie的管理
如果需要得到某个Cookie项的值：
_______________________________________________________________________________________________
我们在调用urllib2.urlopen(url)的时候，其实urllib2在open函数内部创建了一个默认的opener对象;
然后调用opener.open()函数,但是默认的opener并不支持cookie。
那么我们需要先新建一个支持cookie的opener,比如通过urllib2中的HTTPCookieProcessor()。

创建HTTPCookieProcessor需要一个存放cookie的容器。
Python提供的存放cookie的容器位于cookielib，有以下几个。
CookieJar -> FileCookieJar -> MozillaCookieJar / LWPCookieJar
'''
cookie = cookielib.CookieJar()
opener = urllib2.build_opener(urllib2.HTTPCookieProcessor(cookie))

response = opener.open('http://zhihu.com')
html = response.read()
# print html

for item in cookie:
	print item.name + ':' + item.value,

收录于