摘要：
苦于qa账号，木有drop，truncate权限，同步数据要挨个delete表里边的数据，就写了个脚本，循环删除某个目标库的所有表里边的数据。先在information_schema的库里边，通过TABLES的表（注意此处是大写，后边有些必须是大写，自己可以去了解下这个数据库的作用）去获取目标数据库... 阅读全文
摘要：
最近在搞关于数据分析的项目，做了一点总结。下图是系统的数据流向。容易出现错误的地方。1、数据进入hadoop仓库有四种来源，这四种是最基本的数据，简称ods，original data source，后续 的数据都是有这些组合而来a、日志文件b、http接口c、DB查询d、建表指向最后数据都是以ha... 阅读全文
摘要：
deb http://mirrors.oschina.net/ubuntu/ raring main restricted universe multiversedeb http://mirrors.oschina.net/ubuntu/ raring-backports main restrict... 阅读全文
摘要：
ab是apache 自带的一个压力测试的小工具，可用于接口简单的压力测试。以下是AB的简要介绍格式：ab [options] [http://]hostname[:port]/path参数说明：-n requests Number of requests to perform//在测试会话中所执行的... 阅读全文
摘要：
#!/usr/bin#设置数据库连接conn='mysql -hhost -Pport -uusername -ppassword'#获取最新的binlog文件logfile=$($conn -e "show master logs" | tail -n 1 | awk -F" " '{print ... 阅读全文
摘要：
先要起一个服务 server.py，可以支持python的cgi脚本。1 #!coding:utf82 from BaseHTTPServer import HTTPServer3 from CGIHTTPServer import CGIHTTPRequestHandler4 5 port=808... 阅读全文
摘要：
最近想用python写个切换host的小工具，折腾了好几天，终于实现了第一步。采用Tkinter编程，text控件接受输入，然后点击save按钮，保存内容到当前文件夹下，文件名为hostb，如下两张图片：直接上代码： 1 #支持中文 2 3 #！coding:gbk 4 5 #导入需要的包 6 ... 阅读全文
摘要：
本文简单讲述如何利用python执行一些sql语句，例如执行mysqldump命令，进行数据库备份，备份成sql文件#!/usr/bin/python#导入os模块import os#导入时间模块import time#导入sys模块import sys#追加mysql的bin目录到环境变量sys.... 阅读全文
摘要：
这几天在跟踪一个项目的时候，老是发现mysql连接报timeout的异常。Cause: com.mysql.jdbc.exceptions.jdbc4.CommunicationsException:The last packet successfully received from the ser... 阅读全文
摘要：
这几天测试确认系统的订单大库查询，发现查询很慢，但是都增加了相应的索引，但是依然很慢，查询经常请求超时，涉及的数据库是order-store的order-index表（目前是直接通过和数据库交互的方式去查询的，没有用到搜索引擎）。经过排查，发现是数据迁移，迁移进来了300多万的数据，拖慢了查询的速度... 阅读全文