Pyt的hon-Requests库入门1.pdf

WS01 嵩天 The Website is the API… Requests 自动爬取HTML页面 自动网络请求提交 掌握定向网络数据爬取和网页解析的基本能力 网络爬虫与信息提取 O4X -Tian Win平台:  “以管理员身份运行”cmd ，执行pip install requests 方法 说明 requests.request() 构造一个请求，支撑以下各方法的基础方法 requests.get() 获取HTML网页的主要方法，对应于HTTP的GET requests.head() 获取HTML网页头信息的方法，对应于HTTP的HEAD requests.post() 向HTML网页提交POST请求的方法，对应于HTTP的POST requests.put() 向HTML网页提交PUT请求的方法，对应于HTTP的PUT requests.patch() 向HTML网页提交局部修改请求，对应于HTTP的PATCH requests.delete() 向HTML页面提交删除请求，对应于HTTP的DELETE requests.get() r = requests.get(url) 返回一个包含服务器 构造一个向服务器请求 资源的Response对象 资源的Request对象 Response Request requests.get(url, params=None, **kwargs) ∙ url : 拟获取页面的url链接 ∙ params : url中的额外参数，字典或字节流格式，可选 ∙ **kwargs : 12个控制访问的参数 requests.get(url, params=None, **kwargs) Requests 2 r = requests.get(url) Response Request Response对象包含爬虫返回的内容 Response Response对象包含服务器返回的所有信息，也包含请求的Request信息 Response (1) 属性 说明 r.status_code HTTP请求的返回状态，200表示连接成功，404表示失败 r.text HTTP响应内容的字符串形式，即，url对应的页面内容 r.encoding 从HTTP header中猜测的响应内容编码方式 r.apparent_encoding 从内容中分析出的响应内容编码方式（备选编码方式） r.content HTTP响应内容的二进制形式 Response