09 2018 档案
摘要：1. 下载hadoop-common-2.2.0-bin-master hbase-1.0.2 并解压 2. 配置 修改 三个个环境变量 2.1 JAVA_HOME(如果没有配置请先配置 确保电脑中装有jdk环境) 2.2 HADOOP_HOME(hadoop-common-2.2.0-bin-ma
阅读全文
摘要：我们可以设置集群的平衡参数来暂时禁用掉平衡，具体步骤如下： 1.如果可能的话，先暂停掉数据新增和更新操作，这样会提高集群恢复的时间； 2.禁用集群分片平衡操作，直到告诉集群可以恢复平衡操作为止，禁用配置方式： 注意：put操作的时候，如果不是在集群节点上，需要加上完成的路径，如： 3.关掉需要维护的
阅读全文
摘要：基于 elasticsearch 1.4.4 版本.安装方式为RPM安装.所有涉及路径需根据实际情况来设置判断. 0x01 内存调整 调整ES内存分配有多种方式,建议调整 /etc/sysconfig/elasticsearch 中的设置(还可以直接修改bin下的启动脚本). 注:只需要修改 ES_
阅读全文
摘要：转自： https://mp.weixin.qq.com/s/wmSTyIGCVhItVNPHcH7nsA 一、整体架构 为什么采用ES作为搜索引擎呢？在做任何事情的时候，不要一上来就急着了解怎么做这件事情，而是去想想这件事情为什么值得去做。 这个是比较通用的数据的流程，一般会通过Kafka分离产生
阅读全文
摘要：ElasticSearch集群的高可用和自平衡方案会在节点挂掉（重启）后自动在别的结点上复制该结点的分片，这将导致了大量的IO和网络开销。如果离开的节点重新加入集群，elasticsearch为了对数据分片(shard)进行再平衡，会为重新加入的节点再次分配数据分片(Shard), 当一台es因为压
阅读全文
摘要：所有用Maven管理的真实的项目都应该是分模块的，每个模块都对应着一个pom.xml。它们之间通过继承和聚合（也称作多模块，multi-module）相互关联。那么，为什么要这么做呢？我们明明在开发一个项目，划分模块后，导入Eclipse变成了N个项目，这会带来复杂度，给开发带来不便。 为了解释原因
阅读全文
摘要：1. maven依赖 2. servletContext.xml 3. servletContext-mvc.xml 4. webSocket配置 5. 会话拦截器 6. websocket处理器 处理器里面可以注入想要的service 7. 示例页面 8. 页面js
阅读全文
摘要：1 简介 Log4j（log for java）是Apache的一个开源项目，通过使用Log4j，我们可以控制日志信息输送的目的地是控制台、文件、GUI组件，甚至是套接口服务器、NT的事件记录器、UNIX Syslog守护进程等；我们也可以控制每一条日志的输出格式；通过定义每一条日志信息的级别，我们
阅读全文
摘要：ES各种节点的分工 1. 客户端节点 当主节点和数据节点配置都设置为false的时候，该节点只能处理路由请求，处理搜索，分发索引操作等，从本质上来说该客户节点表现为智能负载平衡器。独立的客户端节点在一个比较大的集群中是非常有用的，他协调主节点和数据节点，客户端节点加入集群可以得到集群的状态，根据集群
阅读全文
摘要：小贴士1：规划索引、分片 以及集群增长情况 ES使得创建大量索引和超大量分片非常地容易，但更重要的是理解每个索引和分片都是一笔开销。如果拥有太多的索引或分片，单单是管理负荷就会影响到ES集群的性能，潜在地也会影响到可用性方面。这里我们专注于管理负荷，但运行大量的索引/分片依然会非常显著地影响到索引和
阅读全文
摘要：引用： http://blog.csdn.net/zxf_668899/article/details/54582849
阅读全文
