随笔分类 - java
摘要：Aspose简介 Aspose.Total是Aspose公司旗下全套文件格式处理解决方案，提供最完整、最高效的文档处理解决方案集，无需任何其他软件安装和依赖。主要提供.net、java、C++d三个开发语言的工具包，通过它，可以对办公文档格式的转换和文档内容的在线编辑，如：Word, Excel,
阅读全文
摘要：背景 一切皆有因果，所有事情，都有事件驱动。本方案的日志级别切换是由这样的背景下产生的： 单个生产环境上，有几百近千个微服务 日志级别切换不重启服务，要求即时生效果 由业务开发人员去修改代码或增加相关依赖配置等涉及面广，推动进度慢 后期动态实时过滤垃圾日志，减少io和磁盘空间成本 logback简介
阅读全文
摘要：kafka-connect-hive是基于kafka-connect平台实现的hive数据读取和写入插件，主要由source、sink两部分组成，source部分完成hive表数据的读取任务，kafka-connect将这些数据写入到其他数据存储层中，比如hive到ES数据的流入。sink部分完成向
阅读全文
摘要：zookeeper单个path下存储的数据有默认大小限制。默认是1M。如果将大小超过1M的数据存储，将报异常，存储失败。 解决办法： 1、在zkServer.sh中加入：-Djute.maxbuffer=1000240000 2、zkCli.sh中加入：-Djute.maxbuffer=100024
阅读全文
摘要：流水查询需求 需求第一期： 基于TB级的在线数据，支持缴费帐单明细在线查询。大家都知道，像银行帐单流水一样，查几年的流水是常有的事。 支持的维度查询：帐期、欠费状态、日期范围、费用科目类型、房屋分类、房屋所属项目、关联合同信息、统计列 什么是实时数据 实时可以分为：实时采集、实时计算、高性能，底延时
阅读全文
摘要：前面几章蜻蜓点水的介绍了elasticsearch、apm相关的内容。本片主要介绍怎么使用ELK Stack帮助我们打造一个支撑起日产TB级的日志监控系统 背景 在企业级的微服务环境中，跑着成百上千个服务都算是比较小的规模了。在生产环境上，日志扮演着很重要的角色，排查异常需要日志，性能优化需要日志，
阅读全文
