Python爬虫如何获取网页Network中某个文件的response?

举个例子谢谢,谢谢
2025-03-04 04:55:26
推荐回答(2个)
回答1:

网页信息在requests.get(xxxx).text里。好好看requests的文档。get返回的是一个response对象,里面有各种变量,你需要的是其中叫text的那一个。你直接print这个response对象的结果完全取决于开发者对__repr__或者__str__的重写情况。

回答2:

url = "www.baidu.com"
response = requests.get(url=url, headers=share_web_header)
item = {}
item['uri'] = url
item['request_method'] = 'GET'
item['request_header'] = response.request.headers
item['request_body'] = ''
item['response_header'] = response.headers
item['response_body'] = response.text
print(item)