构建请求对象 user-agent:客户端浏览器类型;中文名也叫用户代理 #需要创建一个头部文件 headers = {'User-Agent':'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36 QIHU 360SE'} #生成一个请求对象 request = urllib.request.Request(url=url,headers=headers) 目的:模拟浏览器,防止被当爬虫处理
|
|