2013年6月26日
C#开源爬虫NCrawler源代码解读以及将其移植到python3.2（1）
摘要： NCrawler 是一款 .net 上的开源爬虫,虽然它没有arachnode.net那么成熟完善,但是代码量小,设计结构好,很适合大家研读。在NCrawler.Demo项目下的Program.cs文件中,找到Main函数函数开头的一段代码,是打开HTTP协议的限制(对同一个WEB最多同时发起两个连... 阅读全文
posted @ 2013-06-26 22:15 爱知菜 阅读(315) 评论(0) 推荐(0) 编辑