随笔分类 - 其他
其他未分类文章
摘要:在编译CDH版本的各个开源软件时,需要从cdh-repo下载对应的jar包,但发现下载速度非常慢,甚至有时候出现下载异常的情况。 下面是国内可用的、速度非常快的一个maven代理仓库,亲测可用: https://repo.rdc.aliyun.com/repository/82963-release
阅读全文
摘要:背景: 随着微服务的盛行,做开发时不可避免的要涉及第三方接口,安全起见,这些接口都会需要一个token参数。而token一般都会有一个过期时间,比如2小时或者30分钟。那么如何在自己的应用中存储并管理这些token呢? 常见方案: 内存缓存;第三方缓存 我们一般都会给每个第三方设置一个过期时间参数,
阅读全文
摘要:MongoDB集群跨网络、跨集群数据同步有以下几个方案,此处只是简单介绍,不过详细描述。 1、MongoDB自带的复制方案 优点:实施简单,不需要额外的技术栈 缺点:网络双向可连通。 2、CDC同步方案1 该方案在源集群部署CDC,读取源集群的oplog,将数据写入目标集群。 优点:支持异构同步,即
阅读全文
摘要:RT quill目前的驱动(2.4.2版本)不支持json,等待作者更新版本吧
阅读全文
摘要:不得不说这是一本好书。本书涉及的主要内容从书名就可以看出来:函数式、响应式、领域驱动建模。 该书并不是一个入门级教材,读者需要对函数式、响应式、领域驱动建模有一定的基础,缺一不可。比如我对领域驱动建模这块不是太熟悉,研读的时候会不太理解作者为什么会举那些例子;对函数式不够深入,看后面几章就会有云里雾
阅读全文
摘要:tomcat作为web容器被广泛应用,但作者所在的公司restful接口特别多,每个接口都需要一个tomcat来启动,为了配置隔离,一般都会把tomcat安装文件复制多遍,分别把war包部署在对应的webapp目录下,但这样造成的问题就是tomcat安装文件占用了大量的磁盘空间,且不便于统一管理。比如要修改tomcat的某个配置,那么对应的所有的tomcat目录都要修改一遍。
基于上述情况,作者设计了一种基于docker的tomcat服务化方案。
阅读全文
摘要:本文提供一种用SCALA把JSON串转换为HIVE表的方法,由于比较简单,只贴代码,不做解释。有问题可以留言探讨。
阅读全文