php curl批处理
php模拟多线程用到curl库,这个库很强大,可以做好多事,比如模拟登陆,文件上传/下载,数据采集等。
下面是我的代码,很简单,有些还功能还不会用。
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 | <?php $node_urls = array ( 'http://www.baidu.com' , 'http://www.google.com.hk' ); $ch = array (); $mh =curl_multi_init(); $ch [0]=curl_init( $node_urls [0]); $ch [1]=curl_init( $node_urls [1]); for ( $i =0; $i <2; $i ++) { curl_setopt( $ch [ $i ],CURLOPT_RETURNTRANSFER,1); curl_multi_add_handle( $mh , $ch [ $i ]); } $running =NULL; do { usleep(10000); curl_multi_exec( $mh , $running ); } while ( $running >0); $res = array (); for ( $j =0; $j <2; $j ++) { $res [ $j ]=curl_multi_getcontent( $ch [ $j ]); } for ( $k =0; $k <2; $k ++) { curl_multi_remove_handle( $mh , $ch [ $k ]); } curl_multi_close( $mh ); print_r( $res ); ?> |
这段代码就是并行爬取百度和谷歌的代码,以后再慢慢完善。
还有好多事要做。
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 如何编写易于单元测试的代码
· 10年+ .NET Coder 心语,封装的思维:从隐藏、稳定开始理解其本质意义
· .NET Core 中如何实现缓存的预热?
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
· 地球OL攻略 —— 某应届生求职总结
· 周边上新:园子的第一款马克杯温暖上架
· Open-Sora 2.0 重磅开源!
· .NET周刊【3月第1期 2025-03-02】
· [AI/GPT/综述] AI Agent的设计模式综述
2013-05-18 坚持的力量 第二十三篇