reblue520

2019年7月15日

摘要： # coding=utf-8 import os import sys # 判断是否是root用户 if os.getuid() == 0: pass else: print('当前用户不是root用户，请以root用户执行脚本') sys.exit(1) version = raw_input('请输入您想安装的python版本(2.7/3.5)') if ver... 阅读全文

posted @ 2019-07-15 14:43 reblue520 阅读(378) 评论(0) 推荐(0) 编辑

python接入微博第三方API之2接入用户登录和微博发布

摘要： python接入微博第三方API之2接入用户登录和微博发布登录api https://open.weibo.com/wiki/Connect/login https://api.weibo.com/oauth2/authorize?client_id=YOUR_CLIENT_ID&response 阅读全文

posted @ 2019-07-15 14:34 reblue520 阅读(723) 评论(0) 推荐(0) 编辑

python接入微博第三方API之1环境准备

摘要：环境准备： 1.注册微博账号 2.注册应用阅读全文

posted @ 2019-07-15 14:28 reblue520 阅读(195) 评论(0) 推荐(0) 编辑

python制作简单excel统计报表3之将mysql数据库中的数据导入excel模板并生成统计图

摘要： python制作简单excel统计报表3之将mysql数据库中的数据导入excel模板并生成统计图 mysql表数据： create database user_grade charset=utf8mb4;use user_grade; SET NAMES utf8mb4;SET FOREIGN_K 阅读全文

posted @ 2019-07-15 11:32 reblue520 阅读(1256) 评论(0) 推荐(0) 编辑

python制作简单excel统计报表2之操作excel的模块openpyxl简单用法

摘要： python制作简单excel统计报表2之操作excel的模块openpyxl简单用法建表语句： CREATE TABLE `score` ( `id` int(11) unsigned NOT NULL AUTO_INCREMENT, `year` int(11) DEFAULT NULL, ` 阅读全文

posted @ 2019-07-15 10:57 reblue520 阅读(799) 评论(0) 推荐(0) 编辑

python制作简单excel统计报表1之with的简单用法

摘要： # coding=utf-8 def open_file(): """使用with打开一个文件""" # 普通操作文件方法 # f = open('./static/hello.txt', 'r', encoding='utf-8') # rest = f.read() # print(rest) # f.close() # with... 阅读全文

posted @ 2019-07-15 10:56 reblue520 阅读(342) 评论(0) 推荐(0) 编辑

2019年7月13日

简单爬虫爬取知乎日报并保存日报网页到本地

摘要：知乎日报爬虫 # 代码运行结果阅读全文

posted @ 2019-07-13 11:19 reblue520 阅读(882) 评论(0) 推荐(0) 编辑

2019年7月10日

从0开始学爬虫6比价工具开发2之图书信息汇总

摘要：当当的数据 spider_dangdang.py 京东的数据爬取 spider_jd.py 一号店的数据爬取 spider_yhd.py 天猫的数据爬取 spider_tmall.py 数据汇总 spider_book_price.py # 程序运行结果阅读全文

posted @ 2019-07-10 10:25 reblue520 阅读(494) 评论(0) 推荐(0) 编辑

2019年7月8日

从0开始学爬虫6比价工具开发1之爬取当当、京东的数据

摘要：从0开始学爬虫6比价工具开发1之爬取当当、京东的数据爬取当当数据 spider_dangdang.py 运行结果： # 爬取京东网站 # 爬取一号店的数据 # 爬取天猫的数据(淘宝需要登录，就改为爬取天猫) 阅读全文

posted @ 2019-07-08 19:14 reblue520 阅读(670) 评论(0) 推荐(0) 编辑

从0开始学爬虫5之优雅的使用字符串

摘要：从0开始学爬虫5之优雅的使用字符串用%格式化字符串 %格式化基本语法： %[转换标记][宽度[.精度]]转换类型 Format方式格式化字符串基本语法： [[填充符]对齐方式][符号][#][0][宽度][,][.精确度][转换类型] 字符串格式化举例 04use_str.py # 运行结果阅读全文

posted @ 2019-07-08 15:24 reblue520 阅读(205) 评论(0) 推荐(0) 编辑

从0开始学爬虫4之requests基础知识

摘要：从0开始学爬虫4之requests基础知识安装requestspip install requests get请求：可以用浏览器直接访问请求可以携带参数，但是又长度限制请求参数直接放在URL后面 POST请求：不能使用浏览器直接访问对请求参数的长度没有限制可以用来上传文件等需求 requests常阅读全文

posted @ 2019-07-08 15:10 reblue520 阅读(135) 评论(0) 推荐(0) 编辑

从0开始学爬虫3之xpath的介绍和使用

摘要：从0开始学爬虫3之xpath的介绍和使用 Xpath：一种HTML和XML的查询语言，它能在XML和HTML的树状结构中寻找节点安装xpath: pip install lxml HTML 超文本标记语言(HyperText Mark-up Language)，是一种规范，一种标准，是构成网页文档阅读全文

posted @ 2019-07-08 11:58 reblue520 阅读(531) 评论(0) 推荐(0) 编辑

从0开始学爬虫2之json的介绍和使用

摘要：从0开始学爬虫2之json的介绍和使用 Json 一种轻量级的数据交换格式，通用，跨平台键值对的集合，值的有序列表类似于python中的dict Json中的键值如果是字符串一定要用双引号 json文件static/book.json Json的常用方法练习use_json.py 阅读全文

posted @ 2019-07-08 11:49 reblue520 阅读(262) 评论(0) 推荐(0) 编辑

从0开始学爬虫1之环境搭建篇

摘要：从0开始学爬虫1之环境搭建篇下载地址https://www.python.org/downloads/ 设置环境变量：安装pycharm 使用pycharm创建基于python3.6的虚拟环境，即相对独立的开发环境这时候pytcharm就会去安装一些基础的包 Location: 本地代码存放的阅读全文

posted @ 2019-07-08 11:38 reblue520 阅读(237) 评论(0) 推荐(0) 编辑

2019年7月3日

ansible常用的方法小结

摘要：一、批量安装zabbix客户端 1.拷贝sh脚本和.conf到远程服务器(也可以全量拷贝客户端) ansible all -m copy -a "src=/usr/local/zabbix_agents_3.2.0/scripts/php_status_code.sh dest=/usr/local/zabbix_agents_3.2.0/scripts/ mode=0755" ansibl... 阅读全文

posted @ 2019-07-03 11:21 reblue520 阅读(816) 评论(0) 推荐(0) 编辑

2019年7月1日

centos7.6下编译安装zabbix4.0.10长期支持版

摘要： nginx配置文件客户端启动脚本阅读全文

posted @ 2019-07-01 16:36 reblue520 阅读(749) 评论(0) 推荐(0) 编辑

2019年6月28日

centos6.8安装python3.7.3报错Can't connect to HTTPS URL because the SSL module is not available问题解决

摘要：环境：CentOS release 6.8 (Final) # 直接编译python3.7在使用pip3安装依赖的时候报错： Can't connect to HTTPS URL because the SSL module is not available. 解决方法： 1.编译安装OpenSSL 1.0.2j版本并重新配置环境变量下载OpenSSL源码包： wget http... 阅读全文

posted @ 2019-06-28 16:13 reblue520 阅读(5798) 评论(0) 推荐(1) 编辑

2019年6月25日

python简单爬虫爬取百度百科python词条网页

摘要：目标分析：目标：百度百科python词条相关词条网页 - 标题和简介入口页：https://baike.baidu.com/item/Python/407313 URL格式： - 词条页面URL：/item/xxxx 数据格式： - 标题： <dd class="lemmaWgt-lemmaTit 阅读全文

posted @ 2019-06-25 16:56 reblue520 阅读(847) 评论(0) 推荐(0) 编辑

python爬虫简单架构原理及示例

摘要：网页下载器示例： # 运行结果 beautifulsoap使用示例阅读全文

posted @ 2019-06-25 15:33 reblue520 阅读(503) 评论(0) 推荐(0) 编辑

2019年6月17日

shell编程系列26--大型脚本工具开发实战

摘要： shell编程系列26--大型脚本工具开发实战大型脚本工具开发实战拆分脚本功能，抽象函数 1、function get_all_group 返回进程组列表字符串 2、function get_all_process 返回进程名列表字符串"nginx httpd mysql datanode" 3、function get_process_info 返回进程详细信息... 阅读全文

posted @ 2019-06-17 14:23 reblue520 阅读(533) 评论(0) 推荐(0) 编辑

2019年6月13日

shell编程系列25--shell操作数据库实战之备份MySQL数据，并通过FTP将其传输到远端主机

摘要： shell编程系列25--shell操作数据库实战之备份MySQL数据，并通过FTP将其传输到远端主机备份mysql中的库或者表 mysqldump 常用参数详解： -u 用户名 -p 密码 -h 服务器ip地址 -d 等价于--no-data 只导出表结构 -t 等价于--no-create-info 只导出数据，不导出建表语句 -A 等... 阅读全文

posted @ 2019-06-13 16:19 reblue520 阅读(399) 评论(0) 推荐(0) 编辑

shell编程系列24--shell操作数据库实战之利用shell脚本将文本数据导入到mysql中

摘要： shell编程系列24--shell操作数据库实战之利用shell脚本将文本数据导入到mysql中利用shell脚本将文本数据导入到mysql中需求1：处理文本中的数据，将文本中的数据插入到mysql中 1010 jerry 1991-12-13 male 1011 mike 1991-12-13 female 101... 阅读全文

posted @ 2019-06-13 16:16 reblue520 阅读(3638) 评论(3) 推荐(1) 编辑

shell编程系列23--shell操作数据库实战之mysql命令参数详解

摘要： shell编程系列23--shell操作数据库实战之mysql命令参数详解 mysql命令参数详解 -u 用户名 -p 用户密码 -h 服务器ip地址 -D 连接的数据库 -N 不输出列信息 -B 使用tab键代替默认交互分隔符 -e 执行sql语句其他选项 -E 垂直输出 -H 以HTML格式输阅读全文

posted @ 2019-06-13 16:14 reblue520 阅读(733) 评论(0) 推荐(0) 编辑

shell编程系列22--shell操作数据库实战之shell脚本与MySQL数据库交互(增删改查)

摘要：批量删除生产环境数据库表的示例：阅读全文

posted @ 2019-06-13 16:11 reblue520 阅读(880) 评论(0) 推荐(0) 编辑

shell编程系列21--文本处理三剑客之awk中数组的用法及模拟生产环境数据统计

摘要： shell编程系列21--文本处理三剑客之awk中数组的用法及模拟生产环境数据统计 shell中的数组的用法： shell数组中的下标是从0开始的 array=("Allen" "Mike" "Messi" "Jerry" "Hanmeimei" "Wang") 打印元素： echo ${array[2]} 打印元素个数: echo... 阅读全文

posted @ 2019-06-13 15:51 reblue520 阅读(408) 评论(0) 推荐(0) 编辑

专注个人成长

公告