摘要：在ubuntu环境下，使用scrapy定时执行抓取任务，由于scrapy本身没有提供定时执行的功能，所以采用了crontab的方式进行定时执行： 首先编写要执行的命令脚本cron.sh #! /bin/sh ... 阅读全文

摘要：1. 获取某一个节点下所有的文本数据： data = response.xpath('//div[@id="zoomcon"]') content = ''.join(data.xpath('string(.)').extract()) 这段代码将获取，div为某一个特定id的所有文本数据： http://www.nhfpc.gov.cn/fzs/s3576/200804/cdbda975... 阅读全文

摘要：sudo apt-get install python-mysqldb #!/usr/bin/python #-*-coding:utf-8-*- ''' This file include all the common routine,that are needed in the crawler project. Author: Justnzhang @(uestczhangchao@qq.... 阅读全文

摘要：在ubuntu环境下， 想往/etc/sudoers中添加可以执行sudo操作的用户，使用root将/etc/sudoers的权限修改为755后，提示出现标题中的错误： 修正方法：将/etc/sudoers的owner和组修改为root： chown root:root /etc/sudoers 阅读全文

摘要：1. apt-get install mysql-server mysql-client 输入root的密码： 确认root的密码： 2. 连接测试是否成功：mysql –hlocalhost –uroot –p 3. ps –ef | grep mysql 查看mysql的运行情况 4. mysql重启， service mysql restart 在提示信息... 阅读全文

摘要：首先安装tigervnc-server: yum install tigervnc-server 安装好后，设置 vi /etc/sysconfig/vncservers [root@gateway-001 ~]# cat /etc/sysconfig/vncservers # The VNCSERVERS variable is a list of display:user pairs.... 阅读全文