摘要: 1. 为指定的所有做快照 2.查看快照状态 3.将快照产生的文件拷贝到新集群数据仓库所在目录,并修改数据仓库中index文件,增加已经做快照的索引名称 4.使用新集群地址查看快照状态,状态和第2步查看结果一样,说明快照迁移成功 5.恢复快照到新集群 6.对比索引信息,,索引记录数是否一致 7.删除索 阅读全文
posted @ 2017-12-26 15:06 micmouse521 阅读(756) 评论(0) 推荐(0) 编辑
摘要: limits.conf文件限制着用户可以使用的最大文件数,最大线程,最大内存等资源使用量。 最近在测试环境部署hadoop集群和elastic集群,因此需要对limits.conf文件进行修改。 出于好奇,发现内存和线程都可以设置为不限制。想偷懒把nofile也设置成不限制。错误配置如下: 过了不久 阅读全文
posted @ 2017-12-26 09:01 micmouse521 阅读(23750) 评论(0) 推荐(0) 编辑
摘要: /etc/fstab文件是系统启动时要挂载点文件系统。 如果fstab文件配置错误,会导致系统无法正常启动。 最近我就是因为大意,在配置fstab重启服务器后,出现系统无法识别挂载点/opt/backup(/opt/backup目录没有创建导致的),导致系统启动失败。 系统启动失败进入命令行模式,无 阅读全文
posted @ 2017-12-26 08:23 micmouse521 阅读(8917) 评论(0) 推荐(3) 编辑
摘要: 登录zookeeper客户端 cd zookeeper-3.4.10 sh zkCli.sh 查看groupid信息 [zk:localhost:2181(CONNECTED) 1] ls /consumers/ 删除弃用的groupid,groupid为test-group [zk:localhost:2181(CONNECTED) 2] rmr /consumers/test-group ... 阅读全文
posted @ 2017-12-25 17:40 micmouse521 阅读(9016) 评论(0) 推荐(0) 编辑
摘要: 为了elastic时时提供服务,需要elastic至少状态维持在yellow状态。所有,维护时需要依次对elastic单个节点进行维护。 操作步骤如下: 1.停止elastic的自动分配功能 2.关闭需要维护的elastic节点,进行维护 3.开启需要维护的elastic节点服务,等待节点加入集群 阅读全文
posted @ 2017-12-22 15:42 micmouse521 阅读(608) 评论(0) 推荐(0) 编辑
摘要: filebeat的registry文件中存放的是被采集的所有日志的相关信息。 linux中registry中一条日志记录的内容如下 这条记录中的各个字段的意义分别为 device一列的数字64768有些难理解。这个数字可以通过stat命令得到: 64768为十进制数,对应十六进制数fd00,对应磁盘 阅读全文
posted @ 2017-12-22 13:15 micmouse521 阅读(3859) 评论(1) 推荐(0) 编辑
摘要: 公司使用的服务器都是虚拟机,是虚拟机管理员通过模板创建的。 创建的所有逻辑卷都是使用的sda盘。 而我们在部署应用时需要和系统所在盘分离。(提高磁盘读写速度,避免系统盘被占满) 以前都是先创建新的逻辑卷,再让管理员帮忙挂载新盘,扩展逻辑卷。 机器上线以后,发现偶尔会出现登录服务器特别慢,而且执行sh 阅读全文
posted @ 2017-12-21 16:41 micmouse521 阅读(262) 评论(0) 推荐(0) 编辑
摘要: 有时候我们使用正则表达式只希望尽可能少的匹配。 比如在对html文件进行正则匹配时: 如果我们使用.*匹配 匹配结果是 很明显不能满足我们的需求。 这时候我们就需要使用非贪婪式匹配,也可以称为懒惰匹配 懒惰匹配与贪婪匹配的差别就是在贪婪匹配的后面加个?号 同样对上面的html进行匹配,我们使用.*? 阅读全文
posted @ 2017-12-20 08:29 micmouse521 阅读(14010) 评论(0) 推荐(0) 编辑
摘要: 使用mkfs.ext4默认参数格式化磁盘后,发现格式化时间特别长,并且格式化会占用磁盘很大的空间。例如2TB的磁盘格式化会占用10分钟左右时间,并占用30G左右的磁盘空间。究其原因,原来inode会占用磁盘空间,每个inode占用256b大小空间。默认情况下,mkfs2fs会为每16kb的磁盘空间分 阅读全文
posted @ 2017-12-19 11:17 micmouse521 阅读(41232) 评论(0) 推荐(0) 编辑
摘要: 网卡bond是通过多张网卡绑定为一个逻辑网卡,实现本地网卡的冗余,带宽扩容和负载均衡,在生产场景中是一种常用的技术。 生产环境服务器为:DELL 网卡为:光纤 bond需要修改涉及的网卡配置文件 需要新增配置文件 为了方便快速配置,我将配置文件放到了U盘(U盘中需要四个文件,配置好的ifcfg-em 阅读全文
posted @ 2017-12-18 15:52 micmouse521 阅读(1121) 评论(0) 推荐(0) 编辑