上一页 1 ··· 60 61 62 63 64 65 66 67 68 ··· 83 下一页
摘要: Apache的配置文件http.conf参数含义详解 Apache的配置由httpd.conf文件配置,因此下面的配置指令都是在httpd.conf文件中修改。主站点的配置(基本配置) (1) 基本配置:ServerRoot "/mnt/software/apache2" #你的apache软件安装 阅读全文
posted @ 2018-01-17 10:36 追忆丶年华 阅读(317) 评论(0) 推荐(0) 编辑
摘要: 以lampp环境为例子,其他环境只是配置文件的路径不同。 先要在 lampp/etc/httpd.conf ( 这个是Apache 总的配置文件)中,将虚拟路径的注释去掉。 #Include etc/extra/httpd-vhosts.conf 使httpd-vhosts.conf文件起作用,或者 阅读全文
posted @ 2018-01-17 10:35 追忆丶年华 阅读(19406) 评论(0) 推荐(0) 编辑
摘要: 好吧,我又开始折腾豆瓣电影top250了,只是想试试各种方法,看看哪一种的方法效率是最好的,一直进行到这一步才知道 scrapy的强大,尤其是和selector结合之后,速度飞起。。。。 下面我就采用scrapy爬取豆瓣电影top250的方法记录一下,里面采用了selector的xpath和css两 阅读全文
posted @ 2018-01-17 10:34 追忆丶年华 阅读(699) 评论(0) 推荐(0) 编辑
摘要: 创建项目 在开始爬取之前,您必须创建一个新的Scrapy项目。进入您打算存储代码的目录中,运行下列命令: 1 该命令行将会创建包含下列内容的tutorial目录: 1 2 3 4 5 6 7 8 9 10 这些文件分别是: scrapy.cfg:项目的配置文件 tutorial:该项目的python 阅读全文
posted @ 2018-01-17 10:33 追忆丶年华 阅读(2458) 评论(0) 推荐(0) 编辑
摘要: 之前接触scrapy本来是想也许scrapy能够让我的爬虫更快,但是也许是我没有掌握scrapy的要领,所以爬虫运行起来并没有我想象的那么快,看这篇文章就是之前使用scrapy的写得爬虫。然后昨天我又看到了pyspider,说实话本来只是想看看,但是没想到一看就让我喜欢上了pyspider。 先给大 阅读全文
posted @ 2018-01-17 10:32 追忆丶年华 阅读(5290) 评论(1) 推荐(1) 编辑
摘要: http://cuiqingcai.com/1052.html 大家好哈,我呢最近在学习Python爬虫,感觉非常有意思,真的让生活可以方便很多。学习过程中我把一些学习的笔记总结下来,还记录了一些自己实际写的一些小爬虫,在这里跟大家一同分享,希望对Python爬虫感兴趣的童鞋有帮助,如果有机会期待与 阅读全文
posted @ 2018-01-17 10:31 追忆丶年华 阅读(205) 评论(0) 推荐(0) 编辑
摘要: 简介 国人编写的强大的网络爬虫系统并自带强大的WebUI,采用Python语言编写吗,分布式架构。支持多种数据库后端 pyspider中文网站:http://www.pyspider.cn/ 源码网址:https://github.com/binux/pyspider 官方文档: http://do 阅读全文
posted @ 2018-01-17 10:30 追忆丶年华 阅读(359) 评论(0) 推荐(0) 编辑
摘要: web.py 是一个Python 的web 框架,它简单而且功能强大。web.py 是公开的,无论用于什么用途都是没有限制的。 先让大家感受一下web.py 的简单而强大: 看看,上面就是一个基于web.py 的完整的Web 应用。不信?!将上面的代码保存为文件code.py,在命令行下执行pyth 阅读全文
posted @ 2018-01-17 10:29 追忆丶年华 阅读(715) 评论(0) 推荐(0) 编辑
摘要: 本来要用uwsgi,但是。。。介于以前说过。。。这台服务器略老。。。redhat 3的系统。。。确实很老,没法用yum,没法安装很多东西,打算自己编译uwsgi,但是编译各种错误。。。花了快一天,最后放弃了,改用fastcgi吧,虽然网上各种说uwsgi的效率多么高,性能多么好,但是没办法忍痛割爱吧 阅读全文
posted @ 2018-01-17 10:29 追忆丶年华 阅读(387) 评论(0) 推荐(0) 编辑
摘要: 这几天有一个构建restful services的需求,我采用了web.py,之前并没有使用过,但在使用中确实给我带来了很多惊喜。当然,最大的惊喜就是简单,方便。之前开发restful服务的时候,采用java的框架restlet,当时觉得就很方便,很轻量级了。但是用了web.py之后,才发现,开发可 阅读全文
posted @ 2018-01-17 10:28 追忆丶年华 阅读(778) 评论(0) 推荐(0) 编辑
上一页 1 ··· 60 61 62 63 64 65 66 67 68 ··· 83 下一页