上一页 1 ··· 8 9 10 11 12 13 14 15 16 ··· 21 下一页
摘要: vim编辑器 vim 操作命令 在命令模式下操作 底线命令模式: 2 linux下测试访问网站命令 3. 用户管理和文件目录权限 4. 文件权限详解 5. sudo命令用法: vim /etc/sudoers: 6. 给文件和目录添加或删除权限 Linux权限的目的是(保护账户的资料) Linux权 阅读全文
posted @ 2019-04-15 22:48 冰底熊 阅读(202) 评论(0) 推荐(0) 编辑
摘要: crawlSpider 爬虫 思路: 从response中提取满足某个条件的url地址,发送给引擎,同时能够指定callback函数。 1. 创建项目 scrapy startproject myspiderproject 2. 创建crawlSpider 爬虫 scrapy genspider - 阅读全文
posted @ 2019-04-15 15:30 冰底熊 阅读(176) 评论(0) 推荐(0) 编辑
摘要: 案例1 :(增量式爬取)京东全部图书,自己可以扩展 爬取每一本电子书的评论 1.spider: # -*- coding: utf-8 -*- import scrapy from copy import deepcopy import json import urllib class JdSpid 阅读全文
posted @ 2019-04-14 22:48 冰底熊 阅读(967) 评论(0) 推荐(1) 编辑
摘要: 安装scrapy-redis pip install scrapy-redis 从GitHub 上拷贝源码: clone github scrapy-redis源码文件 git clone https://github.com/rolando/scrapy-redis.git scrapy-redi 阅读全文
posted @ 2019-04-14 22:37 冰底熊 阅读(1034) 评论(0) 推荐(0) 编辑
摘要: 由于Django是动态网站,所有每次请求均会去数据进行相应的操作,当程序访问量大时,耗时必然会更加明显, 最简单解决方式是使用:缓存,缓存将一个某个views的返回值保存至内存或者memcache中,5分钟内再有人来访问时, 则不再去执行view中的操作,而是直接从内存或者Redis中之前缓存的内容 阅读全文
posted @ 2019-04-14 11:00 冰底熊 阅读(203) 评论(0) 推荐(0) 编辑
摘要: 简介 redis是一个key-value存储系统。和Memcached类似,它支持存储的value类型相对更多, 包括string(字符串)、list(链表)、set(集合)、zset(sorted set --有序集合)和hash(哈希类型)。 这些数据类型都支持push/pop、add/remo 阅读全文
posted @ 2019-04-13 17:12 冰底熊 阅读(202) 评论(0) 推荐(0) 编辑
摘要: 安装 window系统的redis是微软团队根据官方的linux版本高仿的 官方原版: https://redis.io/ 中文官网:http://www.redis.cn 下载地址: https://github.com/MicrosoftArchive/redis/releases 下载上面的z 阅读全文
posted @ 2019-04-13 11:16 冰底熊 阅读(180) 评论(0) 推荐(0) 编辑
摘要: 系统环境变量的设置 以nginx为例: 方式一: ~/.bash_profile 这是个人的 方式二: 1. 创建用户和设置密码 参考:https://www.cnblogs.com/tiger666/articles/10259192.html 查看所有用户信息: 查找某个用户: 2.修改命令提示 阅读全文
posted @ 2019-04-12 22:03 冰底熊 阅读(308) 评论(0) 推荐(0) 编辑
摘要: 一、安装gcc 一、安装gcc # yum -y install gcc 二、安装libevent # wget http://www.monkey.org/~provos/libevent-2.0.12-stable.tar.gz# tar zxf libevent-2.0.12-stable.t 阅读全文
posted @ 2019-04-12 16:20 冰底熊 阅读(1172) 评论(0) 推荐(0) 编辑
摘要: 1. centos 安装 参照:https://www.cnblogs.com/tiger666/articles/10259102.html 安装过程注意点: 1. 安装过程中的选择安装Basic Web Server 2. 网路类型选择 1. 桥接网络: 虚拟机和大家都在同一个局域网 2 . 网 阅读全文
posted @ 2019-04-11 17:33 冰底熊 阅读(2138) 评论(0) 推荐(0) 编辑
上一页 1 ··· 8 9 10 11 12 13 14 15 16 ··· 21 下一页