2007 年 11月 20 日随笔档案 - RunSir.cn

2007年11月20日

如何用C#语言构造蜘蛛程序

摘要： "蜘蛛"（Spider）是Internet上一种很有用的程序，搜索引擎利用蜘蛛程序将Web页面收集到数据库，企业利用蜘蛛程序监视竞争对手的网站并跟踪变动，个人用户用蜘蛛程序下载Web页面以便脱机使用，开发者利用蜘蛛程序扫描自己的Web检查无效的链接……对于不同的用户，蜘蛛程序有不同的用途。那么，蜘... 阅读全文

posted @ 2007-11-20 20:42 RunSir.cn 阅读(377) 评论(0) 推荐(0) 编辑

用C#实现蜘蛛/爬虫程序的多线程控制

摘要：【引自Felomeng的博客】在《爬虫/蜘蛛程序的制作（C#语言）》一文中，已经介绍了爬虫程序实现的基本方法，可以说，已经实现了爬虫的功能。只是它存在一个效率问题，下载速度可能很慢。这是两方面的原因造成的： 1.分析和下载不能同步进行。在《爬虫/蜘蛛程序的制作（C#语言）》中已经介绍了爬虫程序的两... 阅读全文

posted @ 2007-11-20 20:40 RunSir.cn 阅读(1734) 评论(0) 推荐(1) 编辑

RunSir'Blog--For Technology

公告

如何用C#语言构造蜘蛛程序

用C#实现蜘蛛/爬虫程序的多线程控制