当前位置 : 主页 > 编程语言 > python >

Python 网页请求之requests库的使用详解

来源:互联网 收集:自由互联 发布时间:2023-01-30
目录 1.requests库简介 2.requests库方法介绍 3.代码实例 1.requests库简介 requests 是 Python 中比较常用的网页请求库,主要用来发送 HTTP 请求,在使用爬虫或测试服务器响应数据时经常会用到,
目录
  • 1.requests库简介
  • 2.requests库方法介绍
  • 3.代码实例

1.requests库简介

requests 是 Python 中比较常用的网页请求库,主要用来发送 HTTP 请求,在使用爬虫或测试服务器响应数据时经常会用到,使用起来十分简洁。

requests 为第三方库,需要我们通过pip命令安装:

pip install requests

2.requests库方法介绍

下表列出了requests库中的各种请求方法:

方法描述delete(url, args)发送 DELETE 请求到指定 urlget(url, params, args)发送 GET 请求到指定 urlhead(url, args)发送 HEAD 请求到指定 urlpatch(url, data, args)发送 PATCH 请求到指定 urlpost(url, data, json, args)发送 POST 请求到指定 urlput(url, data, args)发送 PUT 请求到指定 urlrequest(method, url, args)发送指定的请求方到指定 url

每次调用 requests 请求之后,会返回一个 response 对象,该对象包含了具体的响应信息。

response 对象具有以下属性:

属性描述apparent_encoding编码方式content返回响应的内容,以字节为单位cookies返回一个 CookieJar 对象,包含了从服务器发回的 cookieelapsed返回一个 timedelta 对象,包含了从发送请求到响应到达之间经过的时间量,可以用于测试响应速度。
比如 r.elapsed.microseconds 表示响应到达需要多少微秒。encoding解码 r.text 的编码方式headers返回响应头,字典格式history返回包含请求历史的响应对象列表(url)is_permanent_redirect如果响应是永久重定向的 url,则返回 True,否则返回 Falseis_redirect如果响应被重定向,则返回 True,否则返回 Falselinks返回响应的解析头链接next返回重定向链中下一个请求的 PreparedRequest 对象ok检查 “status_code” 的值,如果小于400,则返回 True,如果不小于 400,则返回 Falsereason响应状态的描述,比如 “Not Found” 或 “OK”request返回请求此响应的请求对象status_code返回 http 的状态码,比如 404 和 200(200 是 OK,404 是 Not Found)text返回响应的内容,unicode 类型数据url返回响应的 URL

response 对象还具有一些方法:

方法描述close()关闭与服务器的连接iter_content()迭代响应iter_lines()迭代响应的行json()返回结果的 JSON 对象 (结果需要以 JSON 格式编写的,否则会引发错误)raise_for_status()如果发生错误,方法返回一个 HTTPError 对象

有了这些我们就可以自由的发送页面请求了。

3.代码实例

下面这段代码使用 GET 请求获取了CSDN首页的网页内容:

import requests

x = requests.get('https://www.csdn.net/')

print(x.text)

可以查看 response 对象的各种响应信息:

import requests

x = requests.get('https://www.csdn.net/')

print(x.reason)
print(x.status_code)
print(x.apparent_encoding)

学会了网页请求,我们很快就可以进行爬虫了。

到此这篇关于Python 网页请求之requests库的使用详解的文章就介绍到这了,更多相关Python requests库使用内容请搜索自由互联以前的文章或继续浏览下面的相关文章希望大家以后多多支持自由互联!

上一篇:python requests.post请求404问题及解决方法
下一篇:没有了
网友评论