python中requests库基础应用解析_光环大数据Python培训
光环大数据光环大数据-大数据培训知名品牌大数据培训知名品牌http:/hadoop.aura.cn 光环大数据光环大数据 http:/hadoop.aura.cnpythonpython 中中 requestsrequests 库基础应用解析库基础应用解析_ _光环大数据光环大数据 PythonPython 培训培训python 中 requests 库基础应用解析。python 中 requests 库基础应用解析，python 中 requests 库的基础应用，网页数据挖掘的常用库之一。也就是说最主要的功能是从网页抓取数据。python2.7 下#coding:utf-8#python 网络爬虫库 requests 库应用全解importrequestsimportjsonprintu'=入门='r=requests.get('https:/cuiqingcai.com')#返回 Response 对象printtype(r)printr.status_code#获取返回状态printr.encoding光环大数据光环大数据-大数据培训知名品牌大数据培训知名品牌http:/hadoop.aura.cn 光环大数据光环大数据 http:/hadoop.aura.cnprintr.cookiesprintr.raw#返回原始响应体，也就是 urllib 的 response 对象，使用r.raw.read()读取printr.content#字节方式的响应体，会自动为你解码 gzip 和 deflate 压缩printr.text#字符串方式的响应体，会自动根据响应头部的字符编码进行解码r.headers#以字典对象存储服务器响应头，但是这个字典比较特殊，字典键不区分大小写，若键不存在则返回 None#*特殊方法*#r.json()#Response 中内置的 JSON 解码器#r.raise_for_status()#功能：如果失败请求(非 200 响应)抛出异常printu'=基本请求='r=requests.post(“https:/httpbin.org/post“)r=requests.put(“https:/httpbin.org/put“)r=requests.delete(“https:/httpbin.org/delete“)光环大数据光环大数据-大数据培训知名品牌大数据培训知名品牌http:/hadoop.aura.cn 光环大数据光环大数据 http:/hadoop.aura.cnr=requests.head(“https:/httpbin.org/get“)r=requests.options(“https:/httpbin.org/get“)printu'=基本 GET 请求='payload='key1':'value1','key2':'value2'#字典数据headers='content-type':'application/json'#header 数据r=requests.get(“https:/httpbin.org/get“,params=payload,headers=headers)#payload 可以省略，会在网址中添加printr.urlprintu'=基本 POST 请求='url='https:/httpbin.org/post'payload='some':'data'r=requests.post(url,data=json.dumps(payload)#上传 json 数据printr.texturl='https:/httpbin.org/post'myfiles='file':open('test.txt','rb')#获取文件对象光环大数据光环大数据-大数据培训知名品牌大数据培训知名品牌http:/hadoop.aura.cn 光环大数据光环大数据 http:/hadoop.aura.cnr=requests.post(url,files=myfiles)#上传文件printr.text#withopen('test.txt')asf:#流式上传#requests.post('https:/some.url/streamed',data=f)printu'=Cookies='url='https:/httpbin.org/cookies'r=requests.get(url)#响应中会包含 cookieprintr.cookiesurl='https:/httpbin.org/cookies'cookies=dict(cookies_are='working')#自定义 cookie 变量r=requests.get(url,cookies=cookies)#请求时附带 cookieprintr.textprintu'=超时配置='requests.get('https:/github.com',timeout=1)#1 秒没有响应就报错光环大数据光环大数据-大数据培训知名品牌大数据培训知名品牌http:/hadoop.aura.cn 光环大数据光环大数据 http:/hadoop.aura.cnprintu'=会话对象（持久连接）='s=requests.Session()s.get('https:/httpbin.org/cookies/set/sessioncookie/123456789')#get 方式设置 cookier=s.get(“https:/httpbin.org/cookies“)#获取 cookieprint(r.text)headers='Accept':'text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8','Accept-Encoding':'gzip,deflate,compress','Accept-Language':'en-us;q=0.5,en;q=0.3','Cache-Control':'max-age=0','Connection':'keep-alive','User-Agent':'Mozilla/5.0(X11;Ubuntu;Linuxx86_64;rv:22.0)Gecko/20100101Firefox/22.0's=requests.Session()光环大数据光环大数据-大数据培训知名品牌大数据培训知名品牌http:/hadoop.aura.cn 光环大数据光环大数据 http:/hadoop.aura.cns.headers.update(headers)#更新 headerr=s.get('https:/httpbin.org/headers',headers='x-test':'true')#get 函数中添加的 headers 会覆盖原有同名，添加不同名的，去除值为 None 的printr.textprintu'=SSL 证书验证='r=requests.get('https:/github.com',verify=True)printr.textr=requests.get('https:/kyfw.12306.cn/otn/',verify=False)#把verify 设置为 False 即可跳过证书验证printr.textprintu'=证书='proxies=“https“:“https:/41.118.132.69:4433“光环大数据光环大数据-大数据培训知名品牌大数据培训知名品牌http:/hadoop.aura.cn 光环大数据光环大数据 http:/hadoop.aura.cnr=requests.post(“https:/httpbin.org/post“,proxies=proxies)printr.text为什么大家选择为什么大家选择光环大数据光环大数据！大数据培训、人工智能培训、Python 培训、大数据培训机构、大数据培训班、数据分析培训、大数据可视化培训，就选光环大数据！光环大数据，聘请专业的大数据领域知名讲师，确保教学的整体质量与教学水准。讲师团及时掌握时代潮流技术，将前沿技能融入教学中，确保学生所学知识顺应时代所需。通过深入浅出、通俗易懂的教学方式，指导学生更快的掌握技能知识，成就上万个高薪就业学子。【报名方式、详情咨询报名方式、详情咨询】光环大数据官方网站报名：光环大数据官方网站报名：http:/hadoop.aura.cn/http:/hadoop.aura.cn/手机报名链接：手机报名链接：http:/http:/ hadoop.aura.cnhadoop.aura.cn /mobile/mobile/
