摘要: 什么是爬虫 爬虫就是通过编写程序模拟浏览器上网,然后让其去互联网上抓取数据的过程. 哪些语言可以实现爬虫 1.PHP:可以实现爬虫,但是在实现爬虫中支持多线程和多进程方面做的不好. 2.Java:可以实现爬虫.Java可以非常好的处理和实现爬虫,但是实现爬虫代码比较为臃肿,重构成本较大. 3.c,c 阅读全文
posted @ 2019-02-27 16:07 不喜欢酸甜的刘青阳 阅读(332) 评论(0) 推荐(0) 编辑
摘要: Git是一个开源的分布式版本控制软件,用以有效,高速的处理从很小到非常大的项目版本管理. GitHub是一个基于Git的远程文件托管平台,类似GitCafe,GitLab等.由于Git所有内容以及版本记录只能保存在本机,如果想要将文件内容以及版本记录同时保存在远程,则需要结合GitHub使用. 1. 阅读全文
posted @ 2019-02-22 22:04 不喜欢酸甜的刘青阳 阅读(121) 评论(0) 推荐(0) 编辑
摘要: 一.ansible的前戏 1.ansible与saltstack对比 相同点:都是为了同时在多台机器上执行相同的命令; 都是python开发; 不同点: agent(salt 控制节点需要安装salt-master,被控节点需要安装salt-minion,而ansible不需要,它通过ssh来连接并 阅读全文
posted @ 2019-02-20 22:02 不喜欢酸甜的刘青阳 阅读(372) 评论(0) 推荐(0) 编辑
摘要: 在安装虚拟机中,如过选择最小安装,会遇到无法使用wget的情况,可以尝试以下方法: debian或者ubuntu:sudo apt-get install wget centos:sudo yum -y install wget 阅读全文
posted @ 2019-02-19 16:14 不喜欢酸甜的刘青阳 阅读(9453) 评论(0) 推荐(0) 编辑
摘要: 什么是Celery 本篇博客只是简单的介绍celery,关于celeey的执行机制和详情,推荐一篇博客.https://www.cnblogs.com/forward-wang/p/5970806.html Celery的功能 Celery是基于python实现的第三方组件,可以实现定时任务,周期任 阅读全文
posted @ 2019-02-18 17:31 不喜欢酸甜的刘青阳 阅读(400) 评论(1) 推荐(0) 编辑
摘要: 一.ORM框架简介 对象-关系映射(Object/Relation Mapping,简称ORM),是随着面向对象的软件开发方法发展而产生的。面向对象的开发方法是当今企业级应用开发环境中的主流开发方法,关系数据库是企业级应用环境中永久存放数据的主流数据存储系统。对象和关系数据是业务实体的两种表现形式, 阅读全文
posted @ 2019-02-18 17:30 不喜欢酸甜的刘青阳 阅读(343) 评论(0) 推荐(0) 编辑
摘要: MongoDB是一个著名的NoSQL数据库,顾名思义就是不使用SQL的数据库,目前在很多场景都有使用。如果你不喜欢使用笨拙的各种SQL数据库,可以尝试使用一下MongoDB,会有不一样的感受。本文就是一篇简单的Windows下的安装和使用教程。 下载安装与配置转载于 https://blog.csd 阅读全文
posted @ 2019-01-16 16:06 不喜欢酸甜的刘青阳 阅读(166) 评论(0) 推荐(0) 编辑
摘要: 下面我们来学习一下另一个python框架Flask,和django框架相比,django是"大而全",但是浪费资源;而flask是"小而精,三方组件全",但是稳定性相对较差. flask仅需很简单的一段代码就可以实现一个程序: 一.Response三剑客 二.Flask中小儿子 (1) (2) (3 阅读全文
posted @ 2019-01-07 16:18 不喜欢酸甜的刘青阳 阅读(128) 评论(0) 推荐(0) 编辑
摘要: 一.Redis简介 redis是一个非常重要的非关系型(No-Sql)数据库,数据库分两种类型(关系型数据库和非关系型数据库),我们之前学习的mysql数据库是一种典型的关系型数据库,而redis是一种典型的非关系型数据库. redis不像mysql那样按照一对多或一对一的那种关系存储,而是以key 阅读全文
posted @ 2018-12-21 16:57 不喜欢酸甜的刘青阳 阅读(133) 评论(0) 推荐(0) 编辑
摘要: 一.简介 加密算法包括对称加密和非对称加密,对称加密就是加密和解密用一个秘钥,就像一些电视剧里的电报加密一样,需要一个密码本,发送方通过它加密,接收方通过它解密,因此密码本非常重要,一旦泄露所有信息就会被窃取,也就有了特务护送密码本的桥段,缺点显而易见。 而非对称加密有两个秘钥,公钥和私钥。例如接收 阅读全文
posted @ 2018-12-18 20:10 不喜欢酸甜的刘青阳 阅读(324) 评论(0) 推荐(0) 编辑