requests模块高级操作之cookie

提示：扫一扫查出行
【扫一扫了解最新限行尾号】
复制提示

一、cookie

存储在客户端的键值对，可以让服务端记录客户端相关状态。

如何处理cookie?

手动处理: 将抓包工具中的请求头信息中的cookie键值拷贝到header中

自动处理：session对象

session对象：该对象和requests有类似的功能，也可以想requests一样调用get/post进行请求发送，如果使用seesion进行请求发送的过程中产生了cookie，cookie会被自动存储到session对象中。

#爬取雪球网中的新闻标题和内容 https://xueqiu.com/

import requests

#获取seesion对象

session = requests.session()

header={

    'User-Agent':'Mozilla/5.0 (iPhone; CPU iPhone OS 11_0 like Mac OS X) AppleWebKit/604.1.38 (KHTML, like Gecko) Version/11.0 Mobile/15A372 Safari/604.1'

}

#将cookie存储到session中

session.get(url='https://xueqiu.com/',headers=header) #捕获cookie

url = 'https://xueqiu.com/v4/statuses/public_timeline_by_category.json?since_id=-1&max_id=20353474&count=15&category=-1'

data = session.get(url=url,headers=header).json()

print(data)