一、爬虫发送请求

1、用户伪装

1、用户伪装的基本使用

import requests;
url='https://www.baidu.com'
headers={
	'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/120.0.0.0 Safari/537.36'
}
response=requests.get(url,headers=headers)

2、随机生成大量User-Agent

# 第一种
import random
UAList=[
    'xxxxx',
    'xxxxx',
    'xxxxx',
    ......
]

# 第二种（可能会报错）
from fake_useragent import UserAgent
print(UserAgent().random)