第五十五节,IO多路复用select模块加socket模块,伪多线并发

IO多路复用select模块加socket模块,伪多线并发,并不是真正的多线程并发,实际通过循环等待还是一个一个处理的

IO多路复用,lo就是文件或数据的输入输出,IO多路复用就是可以多用户操作

IO多路复用,可以监听多个文件描述符(socke对象)(文件句柄),一旦文件句柄出现变化,即可感知到,感知到后作出相应操作

 

比如原生socke模块只能监听一个端口和只能一个用户连接,要想实现监听多个端口和支持多用户,就会使用IO多路复用

 

IO多路复用select模块

select()自动监听socket对象的客户端,连接地址和、客户端通讯地址,四个参数

select()自动监听列表里的socket对象(文件描述符),一旦监听的对象,谁发生了变化(有用户请求),
就将发生变化对象的客户端连接地址赋值给第一个变量a,第一个变量接收的列表,列表里的每一个元素,就是一个端口的用户连接地址
如果是多个端口在同时连接客户端,那么列表元素就是多个元素

最多监听端口1024个

使用方法:a, b, c = select.select(列表类型的socke对象变化, [可选:传参直接赋值给第二个变量], [可选:列表类型的socke对象监听错误], 多少秒检测一次)

  需要四个参数 

  参数一:列表类型的socke对象,监听变化

  参数二:传参直接赋值给第二个变量

  参数三:列表类型的socke对象,监听错误

  参数四:多少秒检测一次

  需要三个变量来接收返回值

  第一个变量接收的:列表类型客户端连接地址,如果无客户端连接则为空列表

  第二个变量接收的:第二个参数的值

  第三个变量接收的:第三个参数监听socke对象的错误信息,返回列表,无错误则为空列表

格式:a, b, c = select.select(lib, [], [], 1)

格式2:a, b, c = select.select(lib, k1, lib, 1)

IO多路复用多端口监听客户端连接地址、服务端代码

#!/usr/bin/env python
# -*- coding:utf8 -*-
"""服务端"""
import socket #导入模块
"""设置多个对象,绑定不同端口"""
k1 = socket.socket() #创建对象
k1.bind(('127.0.0.1', 9991)) #绑定服务端IP和端口
k1.listen() #监听IP和端口

k2 = socket.socket() #创建对象
k2.bind(('127.0.0.1', 9992)) #绑定服务端IP和端口
k2.listen() #监听IP和端口

k3 = socket.socket() #创建对象
k3.bind(('127.0.0.1', 9993)) #绑定服务端IP和端口
k3.listen() #监听IP和端口
"""将多个对象组合成列表"""
lib = [k1, k2, k3]

"""使用自动监听模块"""
import select #导入自动监听多个端口模块
while True:
    #select()自动监听列表里的socket对象(文件描述符),一旦监听的对象,谁发生了变化(有用户请求),
    # 就将发生变化对象的客户端连接地址赋值给第一个变量a,第一个变量接收的列表,列表里的每一个元素,就是一个端口的用户连接地址
    #如果是多个端口在同时连接客户端,那么列表元素就是多个元素
    a, b, c = select.select(lib, [], [], 1)
    for k in a: #循环出select()获取到的列表类型客户端连接地址
        d, e = k.accept() #将循环到的每一个客户端连接地址等待通讯,阻塞
        d.sendall(bytes("欢迎访问", encoding="utf-8")) #向连接的客户端发送一条消息

客户端代码1

#!/usr/bin/env python
# -*- coding:utf8 -*-
"""创建客户端"""
import socket #导入模块
z = socket.socket() #创建socket对象
b = z.connect(('127.0.0.1', 9991,))#连接服务端,在客户端绑定服务端IP和端口

f = z.recv(1024) #客户端接收服务端sendall()发来的信息,1024表示最大接收1024字节
f2 = str(f, encoding='utf-8') #将接收到的服务端字节信息转换成字符串
print(f2) #打印出服务端发来的信息

客户端代码2

#!/usr/bin/env python
# -*- coding:utf8 -*-
"""创建客户端"""
import socket #导入模块
z = socket.socket() #创建socket对象
b = z.connect(('127.0.0.1', 9992,))#连接服务端,在客户端绑定服务端IP和端口

f = z.recv(1024) #客户端接收服务端sendall()发来的信息,1024表示最大接收1024字节
f2 = str(f, encoding='utf-8') #将接收到的服务端字节信息转换成字符串
print(f2) #打印出服务端发来的信息

IO多路复用多端口监听、客户端连接地址原理图

 

IO多路复用监听客户端多通讯地址

通过select()监听到客户端变化信息对象,拿到变化信息对象,判断是连接信息对象,还是通讯信息对象?如果是连接信息对象,通过变化信息对象获取到此连接的通讯对象,将通讯对象添加到select()里监听,如果是通讯对象,通过通讯对象进行信息交互

IO多路复用监听客户端多通讯地址服务端代码

#!/usr/bin/env python
# -*- coding:utf8 -*-
"""服务端"""
import socket #导入模块
k1 = socket.socket() #创建对象
k1.bind(('127.0.0.1', 9991)) #绑定服务端IP和端口
k1.listen() #监听IP和端口
lib = [k1]

"""使用自动监听模块"""
import select #导入自动监听多个端口模块
while True:
    #select()自动监听列表里的socket对象(文件描述符),一旦监听的对象,谁发生了变化(有用户请求),
    # 就将发生变化对象的客户端连接地址赋值给第一个变量a,第一个变量接收的列表,列表里的每一个元素,就是一个端口的用户连接地址
    #如果是多个端口在同时连接客户端,那么列表元素就是多个元素
    a, b, c = select.select(lib, [], [], 1)
    print("正在监听的socket对象 %d" % len(lib)) #监听的对象有多少个
    print(a) #监听发生变化的有哪些
    for k in a: #循环出select()获取到的列表类型客户端连接地址
        if k == k1: #判断循环到的连接地址等于socket对象,说明有新用户连接
            d, e = k.accept() #等待请求,获取客户端通讯地址
            lib.append(d) #将客户端通讯地址追加到列表,传入select()监听通讯变化
            d.sendall(bytes("你好", encoding="utf-8"))
        else: #如果不是连接信息,说明是通讯信息
            try: #监控代码是否出现异常,如果客户端关闭了就会出现异常,没出现异常执行里面的代码
                fd = k.recv(1024)
                f = str(fd, encoding="utf-8")
                g = f + ""
                k.sendall(bytes(g, encoding="utf-8"))
            except Exception as ex: #出现异常将当前通讯对象移除列表,select不在监听
                lib.remove(k)

客户端代码

#!/usr/bin/env python
# -*- coding:utf8 -*-
"""创建客户端"""
import socket #导入模块
z = socket.socket() #创建socket对象
b = z.connect(('127.0.0.1', 9991,))#连接服务端,在客户端绑定服务端IP和端口
while True:
    f = z.recv(1024) #客户端接收服务端sendall()发来的信息,1024表示最大接收1024字节
    f2 = str(f, encoding='utf-8') #将接收到的服务端字节信息转换成字符串
    print(f2) #打印出服务端发来的信息
    a = input("输入要发送的信息")
    z.sendall(bytes(a, encoding="utf-8"))

 IO多路复用监听客户端多通讯原理图

 

IO多路复用,有三种方式(select)、(poll)、(epoll) select和poll其实都是调用计算机底层来实现的监听处理,epoll是异步处理的是文件描述符发生变化后主动告诉epoll的,这里我们需要知道一下

注意:wds系统只支持select模块,

 

 

利用select()的第二个参数,实现IO多路复用,服务端读写分离
也就是读和写分开,在不同的代码块

 

服务端读写分离代码

#!/usr/bin/env python
# -*- coding:utf8 -*-
"""服务端实现读写分离"""
import socket #导入模块
k1 = socket.socket() #创建对象
k1.bind(('127.0.0.1', 9991)) #绑定服务端IP和端口
k1.listen() #监听IP和端口

lib = [k1] #监听的客户连接地址或,客户通讯地址,传给select第一个参数
lib2 = [] #接收客户端通讯地址,传给select第二个参数
jilu = {} #接收字典,里面是客户端发通讯内容的用户通讯地址(键)和通讯内容(值)

"""使用自动监听模块"""
import select #导入自动监听多个端口模块
while True:
    #select()自动监听列表里的socket对象(文件描述符),一旦监听的对象,谁发生了变化(有用户请求),
    # 就将发生变化对象的客户端连接地址赋值给第一个变量a,第一个变量接收的列表,列表里的每一个元素,就是一个端口的用户连接地址
    #如果是多个端口在同时连接客户端,那么列表元素就是多个元素
    a, b, c = select.select(lib, lib2, lib, 1)
    print("正在监听的socket对象 %d" % len(lib)) #监听的对象有多少个
    print(a) #监听发生变化的有哪些
    """循环判断链接地址或通讯地址,获取客户端通讯信息以及内容"""
    for k in a: #循环出select()获取到的列表类型客户端连接地址
        if k == k1: #判断循环到的连接地址等于socket对象,说明有新用户连接
            d, e = k.accept() #等待请求,获取客户端通讯地址
            lib.append(d) #将客户端通讯地址追加到列表,传入select()监听通讯变化
            jilu[d] = [] #将连接用户通讯地址添加到字典为键,值为空列表
        else: #如果不是连接信息,说明是通讯信息
            try: #监控代码是否异常
                fd = k.recv(1024) #获取客户端发的信息
            except Exception as e: #如果异常将此通讯地址移除列表,停止监听
                lib.remove(k) #通讯地址移除列表
            else:
                fd2 = str(fd, encoding="utf-8") #接收客户端发的信息转换成字符串
                jilu[k].append(fd2) # 将客户端转换的字符串追加到,字典里当前客户键的,列表里为值
                lib2.append(k) #将当前客户通讯地址,添加到select第二个参数列表里
    """向客户端发信息"""
    for km in b: #循环select第二个参数列表里的通讯用户
        jkd = jilu[km][0] #通过通讯用户拿到字典里对应的通讯内容
        del jilu[km][0] #拿到通讯内容后删除通讯内容
        km.sendall(bytes(jkd+"", encoding="utf-8")) #将通讯内容加个好字,在发给客户端
        lib2.remove(km ) #在通讯列表移除当前通讯地址

    for fh in c: #如果监听连接出现异常
        lib.remove(fh) #移除当前连接

客户端代码

 

#!/usr/bin/env python
# -*- coding:utf8 -*-
"""创建客户端"""
import socket #导入模块
z = socket.socket() #创建socket对象
b = z.connect(('127.0.0.1', 9991,))#连接服务端,在客户端绑定服务端IP和端口
while True:
    a = input("输入要发送的信息")
    z.sendall(bytes(a, encoding="utf-8"))
    f = z.recv(1024) #客户端接收服务端sendall()发来的信息,1024表示最大接收1024字节
    f2 = str(f, encoding='utf-8') #将接收到的服务端字节信息转换成字符串
    print(f2) #打印出服务端发来的信息

 IO多路复用,服务端读写分离原理图

posted @ 2016-09-28 09:32  林贵秀  阅读(525)  评论(0编辑  收藏  举报