关于urllib库

几个模块

data参数，如果加的话即为post请求，不加就是get请求

# 对于urllib的使用
# 1.get请求
import urllib.request  # url请求模块
response = urllib.request.urlopen('http://www.baidu.com')
print(response.read().decode('utf-8'))
# response.read()是一个bytes类型的数据，所以需要调用decode设置编码格式，使其变成字符串

# 2.post请求
# post请求需要传入data参数，data为bytes类型，所以encode编码
import urllib.parse  # url解析模块
data = bytes(urllib.parse.urlencode({'word': 'hello'}),encoding ='utf8')
response = urllib.request.urlopen('http://httpbin.org/post', data=data)
print(response.read())
# timeout 参数  即在规定的时间内没有得到响应的话，就会抛出异常
import urllib.error  # 异常处理模块
import socket
try:
    response = urllib.request.urlopen('http://httpbin.org/get', timeout=0.1)
except urllib.error.URLError as e:
    if isinstance(e.reason, socket.timeout):
        # e.reason 错误的原因是timeout类型
        print('Time out')

# 3.如果要加入更多的参数，像headers之类的，操作过程
# Request
request = urllib.request.Request('http://python.org') # 构建一个request对象
response = urllib.request.urlopen(request)
print(response.read().decode('utf-8'))
# ctrl+c 终止程序
from urllib import request, parse
# 实际上，将要传入的参数作为一个整体传入即可
url = 'http://httpbin.org/post'
headers = {
    'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) '
                 'AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36',
    'Host': 'httpbin.org'
}

dict = {
    'name': 'Gemy'
}

data = bytes(parse.urlencode(dict).encode('utf8'))
req = request.Request(url=url, data=data, headers=headers, method='POST')
response = request.urlopen(req)
print(response.read().decode('utf8'))

# Handler
# cookies
#   比较麻烦。相比于request模块

 request模块比较人性化，，，还是用它好，下一章详细理解request模块

 

https://docs.python.org/3/library/urllib.html

官方文档，有兴趣可以深究。。