python requests爬蟲如何處理Cookie和Session

在Python的requests庫中，處理Cookie和Session非常簡單。以下是如何使用requests庫處理Cookie和Session的方法：

1. 使用requests庫的Session對象：

Session對象會保持你的請求之間的Cookie狀態，這樣你就可以在多個請求之間保持登錄狀態或其他需要Cookie的狀態。以下是如何使用Session對象的一個示例：

import requests

# 創建一個Session對象
session = requests.Session()

# 使用Session對象發送第一個請求（例如登錄請求）
login_url = 'https://example.com/login'
login_data = {
    'username': 'your_username',
    'password': 'your_password'
}
response = session.post(login_url, data=login_data)

# 使用同一個Session對象發送其他請求（例如獲取用戶信息）
user_info_url = 'https://example.com/userinfo'
response = session.get(user_info_url)

# 打印用戶信息
print(response.text)

2. 使用requests庫的cookies參數：

如果你不想使用Session對象，你也可以在每次請求時手動傳遞Cookie。以下是如何使用cookies參數的一個示例：

import requests

login_url = 'https://example.com/login'
login_data = {
    'username': 'your_username',
    'password': 'your_password'
}

# 發送登錄請求并獲取響應
response = requests.post(login_url, data=login_data, cookies=requests.utils.dict_from_cookiejar(response.cookies))

# 提取Cookie并傳遞給其他請求
user_info_url = 'https://example.com/userinfo'
response = requests.get(user_info_url, cookies=requests.utils.dict_from_cookiejar(response.cookies))

# 打印用戶信息
print(response.text)

在這兩個示例中，我們都使用了requests.utils.dict_from_cookiejar()函數將Cookie對象轉換為字典，以便在請求之間傳遞。