介绍

官方的文档介绍：requests是一个非转基因的Python HTTP 库。功能强大，语法简洁。
Requests继承了urllib的所有特性。Requests支持http连接保持和连接池，支持使用cookie保持会话，
支持文件上传，支持自动确定响应内容的编码，支持国际化的URL和POST数据自动编码。
中文文档地址 https://requests.readthedocs.io/zh_CN/latest/

安装

pip install resquests 

#1：测试安装的效果

#第一步  导入模块
import requests
r = requests.get('http://www.baidu.com')
print(r.status_code) #200

requests的三个参数介绍

requests.request(method,url,**kwargs)

• method：请求方法，对应get/put/post/delete/head/patch/options
• url :请求的url地址
• **kwrags：控制访问的参数,共13个，均为可选项

请求方式

Response对象属性

可选参数属性

requests库的异常

案例（一）-爬取百度首页

import requests

r = requests.get(url="https://www.baidu.com/",)

print(r.status_code) #200
print(r.headers) #略 （打印网页的头部信息）
print(r.text) # 略（打印网页的字符串类型）
print(r.encoding) #ISO-8859-1
print(r.apparent_encoding) #utf-8
print(r.content) #略 （打印网页的二进制类型）

"""
可复制代码 挨个打印查看效果
"""

案例（二）-爬取百度图片

import requests

img_response = requests.get(url="http://k.sinaimg.cn/m1/maxwidth.2880/m1.sinaimg.cn/0bdec5881ba749e3a2a79d1a8e4f00ae_640_356.jpg/w700h350z1l10t108ee.jpg", verify=False)
# 保存图片
with open('爬取图片.jpg','wb') as fp:
    fp.write(img_response.content)
    
"""
url可以更换成自己项爬取的图片url

"""

最后 介绍requests通过爬虫框架

import requests

def getHTML(url):
    try:
        r = requests.get(url,timeout = 30)
        r.raise_for_status() #如果不是200，产生异常 requests.HTTPError
        r.encoding = r.apparent_encoding 
        return r.text
    except:
        print("异常")

if __name__ == '__main__':
    url = 'http://www.baidu.com'
    r = getHTML(url)
    print(r)