my.cnf配置文件参数解释
摘要:lower_case_table_names=1#去掉大小写敏感[client] port = 3309 socket = /home/mysql/mysql/tmp/mysql.sock [mysqld] !include /home/mysql/mysql/etc/mysqld.cnf #包含的
阅读全文
posted @
2017-08-30 17:22
adolfmc
阅读(920)
推荐(0) 编辑
MySql增加字段、删除字段、修改字段名称、修改字段类型
摘要:修改数据库字段 alter table biz_apply MODIFY CUSTOMER_ID bigint(60); MySql增加字段、删除字段、修改字段名称、修改字段类型 MySql的简单语法,常用,却不容易记住。当然,这些Sql语法在各数据库中基本通用。 下面列出: 1.增加一个字段 al
阅读全文
posted @
2017-08-29 15:24
adolfmc
阅读(559)
推荐(0) 编辑
mysql 定时任务
摘要:1、set global event_scheduler =1; //开启event_scheduler4、关闭事件 alter event event_task_payment ON COMPLETION PRESERVE DISABLE;5、开启事件alter event event_task_
阅读全文
posted @
2017-08-25 17:23
adolfmc
阅读(200)
推荐(0) 编辑
mysql存储过程,游标实例
摘要:CREATE DEFINER=`root`@`%` PROCEDURE `vir`.`task_payment_byonlinedown`()begin declare _mobile varchar(12) ; declare _amount decimal(18,4) default 0; de
阅读全文
posted @
2017-08-25 16:23
adolfmc
阅读(285)
推荐(0) 编辑
阿里云构建Kafka单机集群环境
摘要:简介 在一台ECS阿里云服务器上构建Kafa单个集群环境需要如下的几个步骤: 服务器环境 JDK的安装 ZooKeeper的安装 Kafka的安装 1. 服务器环境 CPU: 1核 内存: 2048 MB (I/O优化) 1Mbps 操作系统 ubuntu14.04 64位 感觉服务器性能还是很好的
阅读全文
posted @
2017-08-15 06:53
adolfmc
阅读(1602)
推荐(0) 编辑
KafkaOffsetMonitor 安装
摘要:KafkaOffsetMonitor 安装 1,下载KafkaOffsetMonitor-assembly-0.2.0.jar 2,启动 步骤1:启动ZK(DN1~DN3节点) zkServer.sh start 步骤2:启动Kafka服务(集群依次输入以下命令启动) kafka-server-st
阅读全文
posted @
2017-08-14 20:47
adolfmc
阅读(386)
推荐(0) 编辑
logback-kafka-appender
摘要:logback 日志写入kafka队列 logback-kafka-appender Logback incompatibility Warning Due to a bug in logback-core (LOGBACK-1158), logback-kafka-appender does no
阅读全文
posted @
2017-08-11 22:19
adolfmc
阅读(1461)
推荐(0) 编辑
centos7 关闭firewall安装iptables并配置
摘要:一、配置防火墙,开启80端口、3306端口 CentOS 7.0默认使用的是firewall作为防火墙,这里改为iptables防火墙。 1、关闭firewall: systemctl stop firewalld.service #停止firewall systemctl disable fire
阅读全文
posted @
2017-08-11 21:59
adolfmc
阅读(260)
推荐(0) 编辑
Kafka单机环境的部署
摘要:前面说过Kafka集群环境的部署,现在主要说一下在本地测试中Kafka单机环境的部署,和前面一样首先保证zookeeper服务的正常运行,然后解压并释放kafka安装包,并放到指定位置: 现在开始编辑配置文件server.properties,执行命令: vim config/server.prop
阅读全文
posted @
2017-08-11 12:30
adolfmc
阅读(20088)
推荐(0) 编辑
在CentOS 7上安装Kafka
摘要:简介 Kafka 是一种高吞吐的分布式发布订阅消息系统,能够替代传统的消息队列用于解耦合数据处理,缓存未处理消息等,同时具有更高的吞吐率,支持分区、多副本、冗余,因此被广泛用于大规模消息数据处理应用。Kafka 支持Java 及多种其它语言客户端,可与Hadoop、Storm、Spark等其它大数据
阅读全文
posted @
2017-08-11 10:35
adolfmc
阅读(7655)
推荐(0) 编辑
在CentOS上安装ZooKeeper集群
摘要:(可选)创建新用户 一般我倾向于把需要启动daemon进程,对外提供服务的程序,即服务器类的程序,安装在单独的用户下面。这样可以做到隔离,运维方面,安全性也提高了。 创建一个新的group, 创建一个新的用户,并加入group, 给新用户设置密码, 1. 单机模式(Standalone mode)
阅读全文
posted @
2017-08-11 10:35
adolfmc
阅读(362)
推荐(0) 编辑
Storm集成Kafka应用的开发
摘要:我们知道storm的作用主要是进行流式计算,对于源源不断的均匀数据流流入处理是非常有效的,而现实生活中大部分场景并不是均匀的数据流,而是时而多时而少的数据流入,这种情况下显然用批量处理是不合适的,如果使用storm做实时计算的话可能因为数据拥堵而导致服务器挂掉,应对这种情况,使用kafka作为消息队
阅读全文
posted @
2017-08-11 09:44
adolfmc
阅读(459)
推荐(0) 编辑
linux定时任务的设置 crontab 配置指南
摘要:ps -ax | grep cron crontab -u root -e /sbin/service crond restart bakmysql.sh tar cvf /var/backups/mysql/mysql-`date '+%Y%m%d%H%M%S'`.tar -c /opt/mysq
阅读全文
posted @
2017-08-11 09:42
adolfmc
阅读(263)
推荐(0) 编辑
centos下mysql自动备份
摘要:#!/bin/bashdb_user="root"db_passwd="123456"db_name="test_db"#进入备份目录将之前的移动到old目录cd /mnt/backup/bakmysqlecho "you are in bakmysql directory now"mv test_
阅读全文
posted @
2017-08-11 09:42
adolfmc
阅读(278)
推荐(0) 编辑
Linux下查看文件和文件夹大小
摘要:当磁盘大小超过标准时会有报警提示,这时如果掌握df和du命令是非常明智的选择。 df可以查看一级文件夹大小、使用比例、档案系统及其挂入点,但对文件却无能为力。 du可以查看文件及文件夹的大小。 两者配合使用,非常有效。比如用df查看哪个一级目录过大,然后用df查看文件夹或文件的大小,如此便可迅速确定
阅读全文
posted @
2017-08-09 09:46
adolfmc
阅读(224)
推荐(0) 编辑
在 CentOS7 上安装 Zookeeper-3.4.9 服务
摘要:在 CentOS7 上安装 zookeeper-3.4.9 服务 1、创建 /usr/local/services/zookeeper 文件夹: mkdir -p /usr/local/services/zookeeper 2、进入到 /usr/local/services/zookeeper 目录
阅读全文
posted @
2017-08-03 18:41
adolfmc
阅读(288)
推荐(0) 编辑
spring boot下使用logback或log4j生成符合Logstash标准的JSON格式
摘要:使用logback 1.引入logstash日志格式支持 <dependency><groupId>net.logstash.logback</groupId><artifactId>logstash-logback-encoder</artifactId><version>4.4</version
阅读全文
posted @
2017-08-01 13:25
adolfmc
阅读(794)
推荐(0) 编辑
slf4j、jcl、jul、log4j1、log4j2、logback大总结
摘要:1 系列目录 jdk-logging、log4j、logback日志介绍及原理 commons-logging与jdk-logging、log4j1、log4j2、logback的集成原理 slf4j与jdk-logging、log4j1、log4j2、logback的集成原理 slf4j、jcl、
阅读全文
posted @
2017-08-01 10:37
adolfmc
阅读(951)
推荐(0) 编辑
Jar包冲突解决方法
摘要:前言 对于Jar包冲突问题,我们开发人员经常都会有碰到,当我们使用一些jar包中的类、方法等,或者有时遇到一些日志系统的问题(参考另一篇文章Jar包冲突导致的日志问题),我们会遇到ClassNotFoundException,NoSuchFieldException,NoSuchMethodExce
阅读全文
posted @
2017-08-01 10:25
adolfmc
阅读(12925)
推荐(1) 编辑