上一页 1 ··· 4 5 6 7 8 9 10 11 下一页
摘要: 摘要: 设计爬虫架构一个设计良好的爬虫架构必须满足如下需求。(1)分布式:爬虫应该能够在多台机器上分布执行。(2)可伸缩性:爬虫结构应该能够通过增加额外的机器和带宽来提高抓取速度。(3)性能和有效性:爬虫系统必须有效地 ...设计爬虫架构一个设计良好的爬虫架构必须满足如下需求。(1)分布式:爬虫应该... 阅读全文
posted @ 2014-08-13 11:30 王天泽博客 阅读(1600) 评论(0) 推荐(0) 编辑
摘要: 网络爬虫(Web Crawler, Spider)就是一个在网络上乱爬的机器人。当然它通常并不是一个实体的机器人,因为网络本身也是虚拟的东西,所以这个“机器人”其实也就是一段程序,并且它也不是乱爬,而是有一定目的的,并且在爬行的时候会搜集一些信息。例如 Google 就有一大堆爬虫会在 Intern... 阅读全文
posted @ 2014-08-13 11:28 王天泽博客 阅读(131) 评论(0) 推荐(0) 编辑
摘要: my.cnf[mysqld] slow-query-log = on # 开启慢查询这个功能 slow_query_log_file = /var/lib/mysql/slowquery.log # 慢查询日志存放路径与名称 long_query_time = 3 # 查询时间超过3s... 阅读全文
posted @ 2014-08-06 14:26 王天泽博客 阅读(134) 评论(0) 推荐(0) 编辑
摘要: 1.设置cookie有效性://cookieExt.state.Manager.setProvider(new Ext.state.CookieProvider({ expires: new Date(new Date().getTime()+(1000*60*60*24*10)) //有效期... 阅读全文
posted @ 2014-08-04 15:24 王天泽博客 阅读(156) 评论(0) 推荐(0) 编辑
摘要: 摘录自http://www.cnblogs.com/wuyuegb2312/archive/2013/04/09/3008320.html一、简单工厂模式模式特点:工厂根据条件产生不同功能的类。程序实例:四则运算计算器,根据用户的输入产生相应的运算类,用这个运算类处理具体的运算。代码特点:C/C++... 阅读全文
posted @ 2014-07-23 14:46 王天泽博客 阅读(132) 评论(0) 推荐(0) 编辑
摘要: Gvim开发环境配置笔记--Windows篇 阅读全文
posted @ 2014-06-24 13:23 王天泽博客 阅读(73) 评论(0) 推荐(0) 编辑
摘要: 下载插件pydiction-1.2.zip解压后,将里面的python_pydiction.vim文件复制到D:\Program Files\Vim\vimfiles\ftplugin将complete-dict 和 pydiction.py复制到D:\Program Files\Vim\vimfi... 阅读全文
posted @ 2014-06-24 13:19 王天泽博客 阅读(424) 评论(0) 推荐(0) 编辑
摘要: 第一步:下载composer.pharwget http://getcomposer.org/composer.phar第二步:开启php的extension=php_soap.dll第三步:环境配置:$ php composer.phar install --dev$ php app/consol... 阅读全文
posted @ 2014-04-24 11:08 王天泽博客 阅读(239) 评论(0) 推荐(0) 编辑
摘要: 1.安装wget.http://www.alexlomas.com/blog/2005/08/64_bit_wget_for_windows/2.下载composer.phar文件wget http://getcomposer.org/composer.phar3.安装sylius,执行以下命令:p... 阅读全文
posted @ 2014-04-21 11:24 王天泽博客 阅读(238) 评论(0) 推荐(0) 编辑
摘要: 给表单绑定数据时,只需要表单的load()方法即可。 阅读全文
posted @ 2014-03-21 15:57 王天泽博客 阅读(153) 评论(0) 推荐(0) 编辑
上一页 1 ··· 4 5 6 7 8 9 10 11 下一页