随笔- 310  文章- 1  评论- 0  阅读- 86066 

协程

协程:是单线程下的并发,又称微线程,纤程。英文名Coroutine。一句话说明什么是协程:协程是一种用户态的轻量级线程,即协程是由用户程序自己控制调度的。

协程爬虫

1
2
3
4
5
6
7
8
9
10
11
12
13
14
import asyncio
import requests
import time
 
asyncio def run(url):
    prinrt(url)
    loop= asyncio. get_event_loop()
    res =await loop. run_in_executor(None,requests. get,url)
    print(res. url)
 
url_list=["http://www.baidu.com","http://mengsec com"]
tasks=[asyncio. ensure_future(run(url)) for url in url_list]
loop=asyncio. get_event_loop()
loop. run_until_complete(asyncio. wait(tasks))

  

 posted on   boye169  阅读(140)  评论(0编辑  收藏  举报
编辑推荐:
· .NET Core 中如何实现缓存的预热?
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
· 基于Microsoft.Extensions.AI核心库实现RAG应用
· Linux系列:如何用heaptrack跟踪.NET程序的非托管内存泄露
阅读排行:
· TypeScript + Deepseek 打造卜卦网站:技术与玄学的结合
· Manus的开源复刻OpenManus初探
· 三行代码完成国际化适配,妙~啊~
· .NET Core 中如何实现缓存的预热?
· 如何调用 DeepSeek 的自然语言处理 API 接口并集成到在线客服系统
点击右上角即可分享
微信分享提示