极速动车组网络采集5.0发布啦

经过大半年的努力,极速动车组从无到有,最新的5.0版本终于做好了,在这里记录下自己的劳动成果!

回想第一个版本,梦想jq一样的解析,重点放到解析上面去了。对于大数据量的考虑没有到位

第二版版本从新考虑大数量队列在(100w左右)提升很多性能

第三个版本重点支持多数据库,和优化大量队列和其他好的功能

第四个版本重点支持多任务,调整任务队列编码,优化线程操作

极速动车组网络采集在第五个版本添加插件功能,重新构架,运^_^行速度和稳定性都比以前完善,重要的调整了输入和任务备份,非常方便的操作。一站式采集#^_^#,整个程序解压后立刻(在.net2.0以上版本的机器上)运行

 

我的极速动车组软件特点简单归纳:

1.无限递归解析
2.多解析引擎 Js,字符,C#Dom
3.多数据库支持
4.多线程多任务运行效率极高
5.配置规则极其简单
6.本地采用文件数据库,拷贝到任何地方都可以随时运行
7.文件整体在3Mb左右,裸体运行内存紧2Mb左右,多任务运行内存在30Mb左右,比同类软件大幅减少内存占用
8.10w的任务数量比同类软件快80%
9.导出功能强大,执行Access ,excel,sql等
10.支持混合解析
11.支持关键字过滤
12.支持登陆获取数据
13.支持Url复杂配置
14.支持插件开发
15.支持一键一站式采集,无需人工干预

 

在此提供大家下载,反映反馈意见!

下载地址

https://files.cnblogs.com/wangzsky/5.0%e5%8f%91%e5%b8%83.rar 
5.1版本发布更新内容和下载地址
posted @ 2010-12-21 11:24  wangzsky  阅读(1479)  评论(0编辑  收藏  举报