大数据之路

摘要： 一、Hbase 写入慢时的集群异常指标 关于hbase写入优化的文章很多，这里主要记录下，生产hbase集群针对写入的一次优化过程。 hbase写入慢时，从hbase集群监控到的一些指标 -hbase 采用HDP 2.6 ，Hbase -1.1.2 HBase的吞吐量 达到一个峰值之后，瞬间下降，无 阅读全文

摘要： 一、HBase 的TTL 应用的需求 全链路的持久化为HBase的一个应用场景，主要实现的场景描述如下： 公司所有的业务系统的每一次调用过程称之为一次链路 例如： 用户的每次开启充电，从app端的开始调用，到最后充电桩开始将能量输送到车上，这是一个链路 监控系统会将每次链路经过的服务名、服务的参数、 阅读全文

摘要： 大数据多维分析平台的实践 一、 大数据多维分析平台搭建的初心 随着公司业务量的增长，基于传统关系型数据库搭建的各种报表查询分析系统，性能下降明显。同时由于大数据平台的的日趋完善，实时的核心业务数据逐步进入大数据平台。数据进入了大数据平台，相伴而来的是各种业务需求，这里主要聚焦在如何高效稳定的基于大数 阅读全文

摘要： TiDB在特来电的探索 一、 为什么研究TiDB 特来电大数据平台通过开源与自研相结合的方式,目前已经上线多套集群满足不同的业务需求.目前在大数据存储和计算方面主要使用了Hbase、Elasticsearch、Druid、Spark、Flink.大数据技术可谓是百花齐放,百花齐放 百家争鸣,不同的技 阅读全文

摘要： 一、Pivot --9095 端口 二、基本sql 使用 。plysql-- http://plywood.imply.io/plyql （下面的端口应该是8082，我这个地方做了端口转换） 执行sql脚本（bin/plyql -h *.*.195.60:8085 -q 'SHOW TABLES'） 阅读全文