摘要:
Presto Jdbc 标签(空格分隔): Presto 一, 建立连接 传统的JDBC方式类似,建立PrestoConnection”连接“,并且通过unwrap方法将connection转换为PrestoConnection。实际上是赋值一些基本信息,并且建立新的OkHttpClient。 co 阅读全文
摘要:
Zookeeper 3.5.7搭建(启用Kerberos) 标签(空格分隔): zookeeper 一,Zookeeper 3.5.7组件搭建步骤 1,Zookeeper 搭建 (全集群 hosts 文件,profile 系统环境变量文件在所有机器均全部同步完毕),且/etc/profile app 阅读全文
摘要:
Kerberos 简单安装配置 标签(空格分隔): Kerberos 一,Kerberos简史 Kerberos是一种网络安全认证协议,最早由麻省理工研发,用来保护项目 Athena提供的网络服务器。这个协议以希腊神话中的人物Kerberos(或者Cerberus)命名,他在希腊神话中是Hades的 阅读全文
摘要:
HDFS配额总结 标签(空格分隔): Apache Hadoop HDFS允许管理员给私人目录设置其下面文件夹和文件的总数量配额,或空间使用总量配额。所以HDFS配额的对象是目录,而非用户。如果需要实现用户级别的配额,则需要采用第三方系统进行逻辑管理并映射到文件夹配额。 在往有配额的目录中写数据时, 阅读全文
摘要:
Apache Hbase 全攻略 标签(空格分隔): Apache Hbase #一,Hbase 介绍 HBase 是以数据为中心,RDBMS 是以关系为数据,HBase 是 NoSQL 数据库中的列存储数据库,它有以下特点:强一致性读写,自动分片,HBase 通过 Region 分布在集群中,数据 阅读全文
摘要:
博客园CSS配置备份 标签(空格分隔): 设置 页面定制 CSS 代码 博客侧边栏公告(支持HTML代码) (支持 JS 代码) 页首 HTML 代码 参考 https://www.cnblogs.com/jajian/p/9763946.html https://www.cnblogs.com/m 阅读全文
摘要:
2019年总结 标签(空格分隔): 个人成长 技术能力 总结 2019 年,个人在技术方面的成长速度 是低于 自己的预期的,主要有几个方面,因为个人其他方面的 精力投入,这个其他方面的 话,绝大多数都是无用的,且耗费自己 青春年华的,这个在新的一年里希望自己能够认识到自己的不足和自己成长期的时间的重 阅读全文
摘要:
SaltStack 实践 标签(空格分隔): Salt 一,安装 SaltStack 架构 为 Master Slave 架构。 即一台master 管理N 台 Slave 节点。 1.1 安装SaltStack Salt Master安装 Salt Minion安装 二,配置 2.1 SaltSt 阅读全文
摘要:
Hive 利用 on tez 引擎 合并小文件 标签(空格分隔): Hive 获取 partition. 开始执行 !/bin/bash for line in ; do echo "the next partition is $line" partition= \' beeline u jdbc: 阅读全文
摘要:
HDFS balancer 标签(空格分隔): Hadoop #Balancer 必要性 HDFS节点间的数据不平衡,尤其在新增和下架节点、或者人为干预副本数量的时候,多的达到80-90%,少的不到50%。出现这种状况,我们一般采用HDFS自带的balancer工具来解决,保证每个节点的数据分布均衡 阅读全文