​
​

活动地址：CSDN21天学习挑战赛

学习日记

学习知识点

requests库大总结：100天精通Python（爬虫篇）——第44天：requests库大总结_无 羡ღ的博客-CSDN博客_gv网址

0、requests库说明

主要学习requests的http模块，该模块主要用于发送请求获取响应。有很多的替代模块，比如说urlib模块， 但是在工作中用的最多的还是requests模块，requests的代码简洁易懂，相对于臃肿的urlib模块，使用requests编写的爬虫代码将会更少， 而且实现某功能将会简单。

1、安装

输入对应的pip命令：pip install requests

2、常用属性或方法

方法/属性                                            说明
response = requests.get(url)       发送请求获取的响应对象（最常用）
response = requests.post(url)     发送请求获取的响应对象
response.url                                响应的url;有时候响应的ur1和请求的urI并不一致
response.status_ code                响应状态码，如：200,404
response.request.headers          响应对应的请求头
response. headers                      响应头
response.request.cookies           响应对应请求的cookie; 返回cookieJar类型
response.cookies                        响应的cookie (经过了set- cookie动作; 返回cookieJar类型）
response.json()                           自动将json字符串类型的响应内容转换为python对象 (dict or list)
response.text                              返回响应的内容，str类型
response.content                        返回响应的内容， bytes类型

• 通过requests向百度首页发送请求，获取该页面的源码

import requests
 
# 目标网址
url = "http://www.baidu.com/"
 
# 发送请求获取响应
response = requests.get(url)
 
# 查看响应对象的类型
print(type(response))
# 查看响应状态码
print(response.status_code)
# 查看响应内容的类型
print(type(response.text))
# 查看cookies
print(response.cookies)
# 查看响应的内容
print(response.text)
 
# 输出结果
<class 'requests.models.Response'>
200
<class 'str'>
27315 for .baidu.com/>]>
 type content=text/html;charset=utf-8>type=text/css href=http://s1.bdstatic.com/r/www/cache/bdorz/baidu.min.css> #0000cc> 
 
 
 
 
 
  
 
       
 
 
 
 æ–°é—» hao123 地图 视频 è´´å§   æ›´å¤šäº§å“ 
 
 
 
 
 
 å
³äºŽç™¾åº¦ About Baidu 
 
id=cp>©2017 Baidu ä½¿ç”¨ç™¾åº¦å‰å¿
读  class=cp-feedback>æ„è§å馈 äº¬ICPè¯030173å·