星辰大海ゞ

pt-query-digest查询日志分析工具

摘要： 1、工具介绍 pt-query-digest是用于分析mysql慢查询的一个工具，它可以分析binlog、General log、slowlog，也可以通过SHOWPROCESSLIST或者通过tcpdump抓取的MySQL协议数据来进行分析。可以把分析结果输出到文件中，分析过程是先对查询语句的条件阅读全文

posted @ 2016-10-14 14:39 星辰大海ゞ阅读(714) 评论(0) 推荐(0) 编辑

docker-compose安装使用

摘要： Docker Compose的工作原理 Docker Compose将所管理的容器分为三层，工程（project），服务（service）以及容器（contaienr）。Docker Compose运行的目录下的所有文件（docker-compose.yml, extends文件或环境变量文件等）组阅读全文

posted @ 2016-09-19 18:03 星辰大海ゞ阅读(897) 评论(0) 推荐(0) 编辑

Docker私有仓库 Registry中的镜像管理

摘要：这里主要介绍Registry v2的版本查看Registry仓库中现有的镜像： # curl -XGET http://10.0.30.6:5000/v2/_catalog# curl -XGET http://10.0.30.6:5000/v2/mymirrors/tags/list 新版Reg 阅读全文

posted @ 2016-09-09 09:46 星辰大海ゞ阅读(6957) 评论(0) 推荐(1) 编辑

docker网络配置之自定义网桥

摘要：使用特定范围的 IP （仅适用于v1.x）不适用于新版的v1.1x Docker 会尝试寻找没有被主机使用的 ip 段，尽管它适用于大多数情况下，但是它不是万能的，有时候我们还是需要对 ip 进一步规划。Docker 允许你管理 docker0 桥接或者通过-b选项自定义桥接网卡，需要安装bridg 阅读全文

posted @ 2016-09-05 17:29 星辰大海ゞ阅读(6899) 评论(0) 推荐(0) 编辑

mysql小误区关于set global sql_slave_skip_counter=N命令

摘要：背景知识1：在主从库维护中，有时候需要跳过某个无法执行的命令，需要在slave处于stop状态下，执行 set global sql_slave_skip_counter=N以跳过命令。常用的且不易用错的是N=1的情况，但N>1时，则不那么顾名思义，本文详细介绍N的意义，及使用注意事项。背景知识阅读全文

posted @ 2016-08-30 15:29 星辰大海ゞ阅读(2313) 评论(0) 推荐(0) 编辑

MySQL 5.7 深度解析: 半同步复制技术

摘要：复制架构衍生史在谈这个特性之前，我们先来看看MySQL的复制架构衍生史。 MySQL的复制分为四种：半同步复制我们今天谈论第二种架构。我们知道，普通的replication，即mysql的异步复制，依靠mysql二进制日志也即binary log进行数据复制。比如两台机器，一台主机(maste 阅读全文

posted @ 2016-08-18 14:57 星辰大海ゞ阅读(1626) 评论(0) 推荐(0) 编辑

Linux命令之reset - 终端屏幕混乱的终结者

摘要：用途说明 reset命令是用来重新初始化终端的（terminal initialization）。在有些情况，终端显示会混乱无比，比如不小心显示了一个二进制文件，以前我在不知道reset命令时，只好将终端强行关闭，然后重新登录。现在只需要输入reset然后回车就会将混乱的显示通通清除掉，恢复正常状态阅读全文

posted @ 2016-08-04 11:01 星辰大海ゞ阅读(1126) 评论(0) 推荐(1) 编辑

Jenkins+Maven+Sonar系统持续集成环境部署以及配置

摘要：重置Jenkins的build序号系统管理-->脚本命令行：定义单个项目的BUILDE NUMBER初始值： item = Jenkins.instance.getItemByFullName("your-job-name-here") //THIS WILL REMOVE ALL BUILD 阅读全文

posted @ 2016-07-25 09:41 星辰大海ゞ阅读(4689) 评论(0) 推荐(1) 编辑

通过微信企业号发送zabbix报警

摘要：采用微信报警时，管理员账户中必须要设置"示警媒体"一项，"收件人"一项可随便填写一下。其它成员则可以不用添加设置。 1. 首先要自己申请一个微信企业号(貌似一个人可以申请好几个,我测试的时候同样的信息申请了2个没问题)。团体模式的三分钟就ok 微信企业号官网链接： https://qy.weixi 阅读全文

posted @ 2016-07-15 08:40 星辰大海ゞ阅读(567) 评论(0) 推荐(0) 编辑

使用Ganglia监控hadoop、hbase

摘要： Ganglia是一个监控服务器，集群的开源软件，能够用曲线图表现最近一个小时，最近一天，最近一周，最近一月，最近一年的服务器或者集群的cpu负载,内存,网络,硬盘等指标。 Ganglia的强大在于：ganglia服务端能够通过一台客户端收集到同一个网段的所有客户端的数据，ganglia集群服务端能够阅读全文

posted @ 2016-07-14 17:48 星辰大海ゞ阅读(749) 评论(0) 推荐(0) 编辑

Mycat配置文件rule.xml

摘要：打开<MyCAT_HOME>/conf/rule.xml，对应的分片配置截取内容如下: 其含义是：根据<columns>字段来进行分库分表，在本次demo里默认配置是id。采用了基于主键范围的规则。在<property>标签中，autopartition-long.txt是主键范围的具体配置。打开阅读全文

posted @ 2016-07-07 11:18 星辰大海ゞ阅读(507) 评论(0) 推荐(0) 编辑

在MySQL中阻止UPDATE语句没有添加WHERE条件的发生

摘要：如果在生产环境中使用UPDATE语句更新表数据，此时如果忘记携带本应该添加的WHERE条件，那么。。Oh,no…后果可能不堪设想。那么有没有什么办法可以阻止这样的事情发生，又不使用任何的审核工具呢。。。办法当然是有的 sql_safe_updates sql_safe_updates这个MySQL自阅读全文

posted @ 2016-06-27 17:33 星辰大海ゞ阅读(5565) 评论(0) 推荐(0) 编辑

Mycat配置文件schema.xml参数配置

摘要： Mycat原理： Mycat的原理中最重要的一个动词是"拦截"，它拦截了用户发送过来的SQL语句，首先对SQL语句做了一些特定的分析：如分片分析、路由分析、读写分离分析、缓存分析等，然后将此SQL发往后端的真实数据库，并将返回的结果做适当的处理，最终再返回给用户。 Xml的语法相对与HTML来说要严阅读全文

posted @ 2016-06-22 15:54 星辰大海ゞ阅读(1764) 评论(0) 推荐(0) 编辑

根据某个文件或文件夹自制rpm包

摘要：官方文档资料：https://fedoraproject.org/wiki/How_to_create_an_RPM_package/zh-cn#.E5.85.B3.E4.BA.8E.E6.9C.AC.E6.8C.87.E5.8D.97 首先安装打包软件# yum install rpmbuild 阅读全文

posted @ 2016-06-02 18:18 星辰大海ゞ阅读(2846) 评论(0) 推荐(1) 编辑

checkinstall打包工具使用

摘要： checkinstall官网： http://asic-linux.com.mx/~izto/checkinstall/ 该工具适用于针对源码编译时（比如 *.tar.gz）进行制作rpm包下载安装checkinstall，安装完成后生成 /usr/local/sbin/checkinstall 阅读全文

posted @ 2016-06-02 14:42 星辰大海ゞ阅读(648) 评论(0) 推荐(0) 编辑

linux tr命令详解

摘要：替换功能： # cat a.txt 1 2 3 # cat a.txt | tr '\n' ' ' #替换换行符为空格 1 2 3 通过使用 tr，您可以非常容易地实现 sed 的许多最基本功能。您可以将 tr 看作为 sed 的（极其）简化的变体：它可以用一个字符来替换另一个字符，或者可以完全除去阅读全文

posted @ 2016-06-01 10:28 星辰大海ゞ阅读(489) 评论(0) 推荐(0) 编辑

Flume NG简介及配置

摘要： Flume下载地址：http://apache.fayea.com/flume/ 官方使用文档： http://flume.apache.org/documentation.html 与RocketMQ的结合使用扩展：Rocket-Flume：https://github.com/apache/ro 阅读全文

posted @ 2016-05-30 15:39 星辰大海ゞ阅读(1732) 评论(2) 推荐(0) 编辑

Hive安装与配置--- 基于MySQL元数据

摘要： hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。其优点是学习成本低，可以通过类SQL语句快速实现简单的MapReduce统计，不必开发专门的MapReduce应用，十分适合数据阅读全文

posted @ 2016-05-30 15:32 星辰大海ゞ阅读(736) 评论(0) 推荐(0) 编辑

spark1.6.1 on yarn搭建部署

摘要：注：本文是建立在hadoop已经搭建完成的基础上进行的。 Apache Spark是一个分布式计算框架，旨在简化运行于计算机集群上的并行程序的编写。该框架对资源调度，任务的提交、执行和跟踪，节点间的通信以及数据并行处理的内在底层操作都进行了抽象。它提供了一个更高级别的API用于处理分布式数据。从这方阅读全文

posted @ 2016-05-26 17:07 星辰大海ゞ阅读(1221) 评论(0) 推荐(0) 编辑

使用大于16TB的ext4文件系统

摘要：我们的电脑想要快速开机，需要具备三个条件：第一是主板支持UEFI，二是系统支持UEFI（Win8），最后就硬盘需要采用GPT分区。 GPT分区全名为Globally Unique Identifier Partition Table Format，即全局唯一标示磁盘分区表格式。GPT还有另一个名字叫阅读全文

posted @ 2016-05-23 10:31 星辰大海ゞ阅读(4312) 评论(0) 推荐(0) 编辑

导航

公告