Python3 requests 模块

通常我们会选择使用request模块来发 送 HTTP 请求。

因为requests 模块比 urllib 模块更简洁。

但requests模块并不是python内置的标准库，我们需要使用pip命令来安装这个模块！

pip install requests

request的使用相比于urllib简洁了很多，如下所示：

# 导入 requests 包
import requests

# 发送请求
x = requests.get('https://www.w3cschool.cn/')

# 返回网页内容
print(x.text)

每次调用 requests 请求之后，会返回一个 response 对象，该对象包含了具体的响应信息。

响应信息如下：

# 导入 requests 包
import requests

# 发送请求
x = requests.get('https://www.w3cschool.cn/')

# 返回 http 的状态码
print(x.status_code)

# 响应状态的描述
print(x.reason)

# 返回编码
print(x.apparent_encoding)

输出结果如下：

200
OK
utf-8

请求 json 数据文件，返回 json 内容：

# 导入 requests 包
import requests

# 发送请求
x = requests.get('https://www.w3cschool.cn/try/ajax/json_demo.json')

# 返回 json 数据
print(x.json())

输出结果如下：

{'name': '网站', 'num': 3, 'sites': [{'name': 'Google', 'info': ['Android', 'Google 搜索', 'Google 翻译']}, {'name': 'w3cschool', 'info': ['编程狮', '编程狮工具', '编程狮微信']}, {'name': 'Taobao', 'info': ['淘宝', '网购']}]}

requests 方法

requests 方法如下表：

使用 requests.request() 发送 get 请求：

# 导入 requests 包
import requests

# 发送请求
x = requests.request('get', 'https://www.w3cschool.cn/')

# 返回网页内容
print(x.status_code)

输出结果如下：

200

设置请求头：

# 导入 requests 包
import requests

 
kw = {'w':'python 教程'}

# 设置请求头
headers = {"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/54.0.2840.99 Safari/537.36"}
 
# params 接收一个字典或者字符串的查询参数，字典类型自动转换为url编码，不需要urlencode()
response = requests.get("https://www.w3cschool.cn/search/", params = kw, headers = headers)

# 查看响应状态码
print (response.status_code)

# 查看响应头部字符编码
print (response.encoding)

# 查看完整url地址
print (response.url)

# 查看响应内容，response.text 返回的是Unicode格式的数据
print(response.text)

输出结果如下：

200
UTF-8
https://www.w3cschool.cn/search/?w=python+%E6%95%99%E7%A8%8B

... 其他内容...

post() 方法可以发送 POST 请求到指定 url，一般格式如下：

requests.post(url, data={key: value}, json={key: value}, args)

• url 请求 url。
• data 参数为要发送到指定 url 的字典、元组列表、字节或文件对象。
• json 参数为要发送到指定 url 的 JSON 对象。
• args 为其他参数，比如 cookies、headers、verify等。

# 导入 requests 包
import requests

# 发送请求
x = requests.post('https://www.w3cschool.cn/try/ajax/demo_post.php')

# 返回网页内容
print(x.text)

输出结果如下：

<p style='color:red;'>本内容是使用 POST 方法请求的。</p><p style='color:red;'>请求时间：
2022-05-26 17:30:47</p>

post 请求带参数：

# 导入 requests 包
import requests

# 表单参数，参数名为 fname 和 lname
myobj = {'fname': 'w3cschool','lname': 'Boy'}

# 发送请求
x = requests.post('https://www.w3cschool.cn/try/ajax/demo_post2.php', data = myobj)

# 返回网页内容
print(x.text)

输出结果如下：

<p style='color:red;'>你好，w3cschool Boy，今天过得怎么样？</p>