摘要: 首先我们先了解Apache Gzip的相关资料。 一、gzip介绍 Gzip是一种流行的文件压缩算法,现在的应用十分广泛,尤其是在Linux平台。当应用Gzip压缩到一个纯文本文件时,效果是非常明显的,大约可以减少70%以上的文件大小。这取决于文件中的内容。 利用Apache中的Gzip模块,我们可 阅读全文
posted @ 2018-01-17 10:41 追忆丶年华 阅读(236) 评论(0) 推荐(0) 编辑
摘要: 先阅读apache配置优化建议如下,再对相关参数进行调整,观察服务器状况.Apache配置优化建议:进入/usr/local/apache2/conf/extra 目录下Apache优化,经过上述操作后,Apache已经能够正常运行。但是,对于访问量稍大的站点,Apache的这些默认配置是无法满足需 阅读全文
posted @ 2018-01-17 10:40 追忆丶年华 阅读(539) 评论(0) 推荐(0) 编辑
摘要: 错误日志和访问日志文件为系统管理员提供了有用的信息,比如,为 Web 服务器排障,保护系统不受各种各样的恶意活动侵犯,或者只是进行各种各样的分析以监控 HTTP 服务器。根据你 Web 服务器配置的不同,其错误/访问日志可能放在你系统中不同位置。 本文可以帮助你找到Linux上的Apache错误日志 阅读全文
posted @ 2018-01-17 10:39 追忆丶年华 阅读(17420) 评论(0) 推荐(0) 编辑
摘要: 刚刚将服务器系统从CentOS换成Ubuntu,将MySQL,Apache,PHP和Wordpress安装好后,发现打开主页是正常的,但是打开文章页面时出现错误。因为使用了自定义的固定链接设置,那自然是Apache的rewrite功能出现了问题。打开/etc/apache2这个目录准备修改配置文件时 阅读全文
posted @ 2018-01-17 10:38 追忆丶年华 阅读(403) 评论(0) 推荐(0) 编辑
摘要: 需要开启.htacess功能需要以下三步: 1 2 3 4 5 6 7 8 9 1.打开httpd.conf 将Options FollowSymLinks AllowOverride None 改为 Options FollowSymLinks AllowOverride All 2.去掉下面的注 阅读全文
posted @ 2018-01-17 10:37 追忆丶年华 阅读(161) 评论(0) 推荐(0) 编辑
摘要: 一、基于IP 1. 假设服务器有个IP地址为192.168.1.10,使用ifconfig在同一个网络接口eth0上绑定3个IP: [root@localhost root]# ifconfig eth0:1 192.168.1.11[root@localhost root]# ifconfig e 阅读全文
posted @ 2018-01-17 10:36 追忆丶年华 阅读(801) 评论(0) 推荐(0) 编辑
摘要: Apache的配置文件http.conf参数含义详解 Apache的配置由httpd.conf文件配置,因此下面的配置指令都是在httpd.conf文件中修改。主站点的配置(基本配置) (1) 基本配置:ServerRoot "/mnt/software/apache2" #你的apache软件安装 阅读全文
posted @ 2018-01-17 10:36 追忆丶年华 阅读(317) 评论(0) 推荐(0) 编辑
摘要: 以lampp环境为例子,其他环境只是配置文件的路径不同。 先要在 lampp/etc/httpd.conf ( 这个是Apache 总的配置文件)中,将虚拟路径的注释去掉。 #Include etc/extra/httpd-vhosts.conf 使httpd-vhosts.conf文件起作用,或者 阅读全文
posted @ 2018-01-17 10:35 追忆丶年华 阅读(19406) 评论(0) 推荐(0) 编辑
摘要: 好吧,我又开始折腾豆瓣电影top250了,只是想试试各种方法,看看哪一种的方法效率是最好的,一直进行到这一步才知道 scrapy的强大,尤其是和selector结合之后,速度飞起。。。。 下面我就采用scrapy爬取豆瓣电影top250的方法记录一下,里面采用了selector的xpath和css两 阅读全文
posted @ 2018-01-17 10:34 追忆丶年华 阅读(699) 评论(0) 推荐(0) 编辑
摘要: 创建项目 在开始爬取之前,您必须创建一个新的Scrapy项目。进入您打算存储代码的目录中,运行下列命令: 1 该命令行将会创建包含下列内容的tutorial目录: 1 2 3 4 5 6 7 8 9 10 这些文件分别是: scrapy.cfg:项目的配置文件 tutorial:该项目的python 阅读全文
posted @ 2018-01-17 10:33 追忆丶年华 阅读(2458) 评论(0) 推荐(0) 编辑
摘要: 之前接触scrapy本来是想也许scrapy能够让我的爬虫更快,但是也许是我没有掌握scrapy的要领,所以爬虫运行起来并没有我想象的那么快,看这篇文章就是之前使用scrapy的写得爬虫。然后昨天我又看到了pyspider,说实话本来只是想看看,但是没想到一看就让我喜欢上了pyspider。 先给大 阅读全文
posted @ 2018-01-17 10:32 追忆丶年华 阅读(5290) 评论(1) 推荐(1) 编辑
摘要: http://cuiqingcai.com/1052.html 大家好哈,我呢最近在学习Python爬虫,感觉非常有意思,真的让生活可以方便很多。学习过程中我把一些学习的笔记总结下来,还记录了一些自己实际写的一些小爬虫,在这里跟大家一同分享,希望对Python爬虫感兴趣的童鞋有帮助,如果有机会期待与 阅读全文
posted @ 2018-01-17 10:31 追忆丶年华 阅读(205) 评论(0) 推荐(0) 编辑
摘要: 简介 国人编写的强大的网络爬虫系统并自带强大的WebUI,采用Python语言编写吗,分布式架构。支持多种数据库后端 pyspider中文网站:http://www.pyspider.cn/ 源码网址:https://github.com/binux/pyspider 官方文档: http://do 阅读全文
posted @ 2018-01-17 10:30 追忆丶年华 阅读(359) 评论(0) 推荐(0) 编辑
摘要: web.py 是一个Python 的web 框架,它简单而且功能强大。web.py 是公开的,无论用于什么用途都是没有限制的。 先让大家感受一下web.py 的简单而强大: 看看,上面就是一个基于web.py 的完整的Web 应用。不信?!将上面的代码保存为文件code.py,在命令行下执行pyth 阅读全文
posted @ 2018-01-17 10:29 追忆丶年华 阅读(715) 评论(0) 推荐(0) 编辑
摘要: 本来要用uwsgi,但是。。。介于以前说过。。。这台服务器略老。。。redhat 3的系统。。。确实很老,没法用yum,没法安装很多东西,打算自己编译uwsgi,但是编译各种错误。。。花了快一天,最后放弃了,改用fastcgi吧,虽然网上各种说uwsgi的效率多么高,性能多么好,但是没办法忍痛割爱吧 阅读全文
posted @ 2018-01-17 10:29 追忆丶年华 阅读(387) 评论(0) 推荐(0) 编辑
摘要: 这几天有一个构建restful services的需求,我采用了web.py,之前并没有使用过,但在使用中确实给我带来了很多惊喜。当然,最大的惊喜就是简单,方便。之前开发restful服务的时候,采用java的框架restlet,当时觉得就很方便,很轻量级了。但是用了web.py之后,才发现,开发可 阅读全文
posted @ 2018-01-17 10:28 追忆丶年华 阅读(778) 评论(0) 推荐(0) 编辑
摘要: 安装安装web.py, 请先下载:http://webpy.org/static/web.py-0.37.tar.gz或者获取最新的开发版:https://github.com/webpy/webpy/tarball/master解压并拷贝 web 文件夹到你的应用程序目录下。 或者,为了让所有的应 阅读全文
posted @ 2018-01-17 10:27 追忆丶年华 阅读(660) 评论(0) 推荐(0) 编辑
摘要: 那么webpy是什么呢? 阅读它的源码我们又能学到什么呢? 简单说webpy就是一个开源的web应用框架(官方首页:http://webpy.org/) 它的源代码非常整洁精干,学习它一方面可以让我们快速了解python语法(遇到看不懂的语法就去google),另一方面可以学习到python高级特性 阅读全文
posted @ 2018-01-17 10:27 追忆丶年华 阅读(358) 评论(0) 推荐(0) 编辑
摘要: Apache/lighttpd: 相当于一个request proxy,根据配置,把不同的请求转发给不同的server处理,例如静态的文件请求自己处理,这个时候它就像一个web server,对于fastcgi/python这样的请求转发给flup这样的Server/Gateway进行处理 flup 阅读全文
posted @ 2018-01-17 10:26 追忆丶年华 阅读(2325) 评论(1) 推荐(2) 编辑
摘要: 关于nginx+python+fastcgi+flup搭建fastcgi环境没问题了,可是如何处理POST/GET的请求数据呢,这个问题着实纠结了没久,通过尝试和阅读flup的源代码,终于明白了。先上个例子 [python] view plain copy #!/usr/bin/env python 阅读全文
posted @ 2018-01-17 10:25 追忆丶年华 阅读(588) 评论(0) 推荐(0) 编辑