爬虫---02.cookies

2023-09-28 09:27:28

cookie是存储在客户端的键值对
- web中cookie的典型应用免密登陆
- cookie和爬虫之间的联系是在一定时候，对一张页面发起请求，如果不携带cookie的话，无法请求到正确的页面数据反爬机制
  可以将浏览器发请求携带的请求头全部粘贴在headers字典中，将headers作用到requests的请求操作中即可
- cookie的处理方式有两种
  - 手动处理将抓包工具中的cookie粘贴到headers中弊端是过了有效时长则该方式失效
  - 自动处理基于Session对象实现自动处理 requests.Session()返回一个session对象
- session对象的作用：
  - 该对象可以像requests一样调用get和post发起指定的请求
    只不过如果在使用session发起请求的过程中如产生cookie 则自动存储到session对象中意味着下次使用session发请求该请求是携带cookie的
```
    # 实例  访问雪球资讯
```