上一页 1 2 3 4 5 6 ··· 11 下一页

Zookeeper四字命令

摘要: ZooKeeper 支持某些特定的四字命令(The Four Letter Words)与其进行交互。它们大多是查询命令,用来获取 ZooKeeper 服务的当前状态及相关信息。用户在客户端可以通过 telnet 或 nc 向 ZooKeeper 提交相应的命令。 ZooKeeper 常用四字命令主 阅读全文
posted @ 2017-06-08 09:55 一笑之奈何 阅读(2805) 评论(0) 推荐(0) 编辑

Spark与缓存

摘要: 预期成果 1.1 当前问题 当前以图搜图应用存在的问题: 1.2 预期成果 2 技术选型 根据上述问题和预期成果,期望选择一款与Spark结合较好的分布式内存缓存计算,从而将缓存工作从spark中抽离出来,让spark专注于计算。 2.1.1 Apache Ignite Apache Ignite内 阅读全文
posted @ 2017-06-06 11:38 一笑之奈何 阅读(3351) 评论(0) 推荐(1) 编辑

Linux网卡绑定

摘要: 1 原理及模式 linux操作系统下双网卡绑定有七种模式。现在一般的企业都会使用双网卡接入,这样既能添加网络带宽,同时又能做相应的冗余,可以说是好处多多。而一般企业都会使用linux操作系统下自带的网卡绑定模式,当然现在网卡产商也会出一些针对windows操作系统网卡管理软件来做网卡绑定(windo 阅读全文
posted @ 2017-06-06 10:27 一笑之奈何 阅读(206) 评论(0) 推荐(0) 编辑

Kafka理论学习

摘要: Kafka Consumer设计解析 http://www.jasongj.com/2015/08/09/KafkaColumn4/ 阅读全文
posted @ 2017-05-31 10:18 一笑之奈何 阅读(87) 评论(0) 推荐(0) 编辑

URL

摘要: Bookmarks 书签栏 公司 大数据 Kafka hadoop HBase Spark Zookeeper ES 技术 数据库 UML 序列化 单元测试 Scala 开发 运维 WebService 监控和性能优化 技术网站 其它 tmp 新建文件夹 160220 0305 0311 新建文件夹 阅读全文
posted @ 2017-05-26 17:07 一笑之奈何 阅读(324) 评论(0) 推荐(0) 编辑

重点

摘要: 1. 高并发,并发包(java.util.concurrent) 2.JVM内存模型 3.GC 4.集合工具类(高效) 5.NIO 6.大数据 采集 存储 阅读全文
posted @ 2017-05-07 22:32 一笑之奈何 阅读(112) 评论(0) 推荐(0) 编辑

Spark调优

摘要: Spark数据倾斜调优 数据倾斜调优 调优概述 有的时候,我们可能会遇到大数据计算中一个最棘手的问题——数据倾斜,此时Spark作业的性能会比期望差很多。数据倾斜调优,就是使用各种技术方案解决不同类型的数据倾斜问题,以保证Spark作业的性能。 数据倾斜发生时的现象 1、绝大多数task执行得都非常 阅读全文
posted @ 2017-04-21 10:00 一笑之奈何 阅读(289) 评论(0) 推荐(0) 编辑

POSTGRESQL主备部署模式

摘要: 一、预期目的 主数据库(Primary pg ,假定主机名为A,后文不再赘述)和备用数据库(Standby pg,假定主机名为B,后文不再赘述)之间的数据能够相互备份。 主数据库发生故障时备用数据库可以接管工作,变为主数据库。旧的主数据库恢复后,能变为新的主数据库的备用数据库。 主数据库有写入、读取 阅读全文
posted @ 2017-04-20 15:06 一笑之奈何 阅读(12605) 评论(1) 推荐(0) 编辑

Hadoop安全

摘要: kerberos-hadoop配置常见问题汇总 注意事项 常见问题如下(其中前面两点最多): 各目录属主组属性修改. 各目录属主组属性修改. 对于hadoop,需要改为yarn:hadoop/mapred:hdoop/hdfs:hadoop,其他组件如spark直接为spark:spark即可. 组 阅读全文
posted @ 2017-04-20 14:50 一笑之奈何 阅读(11373) 评论(0) 推荐(0) 编辑

工具

摘要: Mindjet MindManager 9 MP95-269-9PF6-F8E9-98FC 阅读全文
posted @ 2017-04-12 10:12 一笑之奈何 阅读(164) 评论(0) 推荐(0) 编辑
上一页 1 2 3 4 5 6 ··· 11 下一页