包含pythonrequests模块安装的词条

本文目录一览：

• 1、python怎么安装request
• 2、Python爬虫笔记（二）requests模块get，post，代理
• 3、为什么我都装了requests模块但是Python他还是没有的？
• 4、python3.5和python3.6对request库的支持

python怎么安装request

安装很简单，我是win系统，就在这里下载了安装包（网页中download the zipball处链接），然后$ python setup.py install就装好了。当然，有easy_install或pip的朋友可以直接使用：easy_install requests或者pip install requests来安装。至于linux用户，这个页面还有其他安装方法。测试：在IDLE中输入import requests，如果没提示错误，那说明已经安装成功了！

Python爬虫笔记（二）requests模块get，post，代理

  import requests

  base_url = ''

  response = requests.get(base_url)

        url=请求url，

        headers =请求头字典，

        params = 请求参数字典。

        timeout = 超时时长，

    )----response对象

  服务器响应包含：状态行（协议，状态码）、响应头，空行，响应正文

    字符串格式：response.text

    bytes类型：response.content

        response.headers['cookie']

    response.text获取到的字符串类型的响应正文，

    其实是通过下面的步骤获取的：

        response.text = response.content.decode(response.encoding)

    产生的原因：编码和解码的编码格式不一致造成的。

        str.encode('编码')---将字符串按指定编码解码成bytes类型

        bytes.decode('编码')---将bytes类型按指定编码编码成字符串。

    a、response.content.decode('页面正确的编码格式')

        meta http-equiv="content-type" content="text/html;charset=utf-8"

    b、找到正确的编码，设置到response.encoding中

        response.encoding = 正确的编码

        response.text---正确的页面内容。

  a、没有请求参数的情况下，只需要确定url和headers字典。

  b、get请求是有请求参数。

    在chrome浏览器中，下面找query_string_params,

    将里面的参数封装到params字典中。

  c、分页主要是查看每页中，请求参数页码字段的变化，

  找到变化规律，用for循环就可以做到分页。

  requests.post(

    url=请求url，

    headers = 请求头字典，

    data=请求数据字典

    timeout=超时时长

  )---response对象

  post请求一般返回数据都是json数据。

（1）response.json()---json字符串所对应的python的list或者dict

（2）用 json 模块。

    json.loads(json_str)----json_data(python的list或者dict)

    json.dumps(json_data)---json_str

  post请求能否成功，关键看**请求参数**。

  如何查找是哪个请求参数在影响数据获取？

  ---通过对比，找到变化的参数。

  变化参数如何找到参数的生成方式，就是解决这个ajax请求数据获取的途径。

**寻找的办法**有以下几种：

    （1）写死在页面。

    （2）写在js中。

    （3）请求参数是在之前的一条ajax请求的数据里面提前获取好的。

  代理形象的说，他是网络信息中转站。

  实际上就是在本机和服务器之间架了一座桥。

  a、突破自身ip访问现实，可以访问一些平时访问不到网站。

  b、访问一些单位或者团体的资源。

  c、提高访问速度。代理的服务器主要作用就是中转，

  所以一般代理服务里面都是用内存来进行数据存储的。

  d、隐藏ip。

    FTP代理服务器---21,2121

    HTTP代理服务器---80,8080

    SSL/TLS代理：主要用访问加密网站。端口：443

    telnet代理 ：主要用telnet远程控制，端口一般为23

    高度匿名代理：数据包会原封不动转化，在服务段看来，就好像一个普通用户在访问，做到完全隐藏ip。

    普通匿名代理：数据包会做一些改动，服务器有可能找到原ip。

    透明代理：不但改动数据，还会告诉服务，是谁访问的。

    间谍代理：指组织或者个人用于记录用户传输数据，然后进行研究，监控等目的的代理。   

  proxies = {

    '代理服务器的类型':'代理ip'

  }

  response = requests.get(proxies = proxies)

  代理服务器的类型:http,https,ftp

  代理ip:

为什么我都装了requests模块但是Python他还是没有的？

可能有几种情况导致您无法在Python中找到requests模块：

requests模块没有安装成功，可以使用以下命令重新安装：pip install requests

安装了多个版本的Python，而您使用的是没有安装requests模块的版本。可以在命令行中使用以下命令查看当前Python版本和模块安装路径：

python -V

pip show requests

如果您发现安装路径不在您当前Python版本的路径中，可以尝试使用以下命令安装模块：python -m pip install requests

可能是因为Python解释器与requests模块的路径不匹配导致的问题。可以尝试在Python脚本的开头添加以下代码，显式地告诉Python解释器查找requests模块的路径：

import sys

import os# 添加 requests 模块的安装路径

sys.path.append(os.path.dirname(os.path.dirname(os.path.abspath(__file__))))

import requests

# 使用 requests 模块进行操作

希望这些解决方法能够帮助您找到并使用requests模块。

python3.5和python3.6对request库的支持

requests库是一个常用的用于http请求的模块，它使用python语言编写，可以方便的对网页进行爬取，是学习python爬虫的较好的http请求模块。

_ip命令安装

_indows系统下只需要在命令行输入命令 pip install requests 即可安装

_? linux 系统下，只需要输入命令 sudo pip install requests ，即可安装。