摘要: 原来没事的时候改了一个这样的功能,当时也没有仔细研究,后来也没继续弄。详细可以参考 https://www.cnblogs.com/liuzx8888/p/17635913.html 当时有2个问题:新增数据源需要每一个节点都去调取API注册跟数据源注册过了删除Catalog后再新增一模一样的就会提 阅读全文
posted @ 2024-04-18 19:39 liuzx8888 阅读(261) 评论(0) 推荐(0) 编辑
摘要: 一、前言 最近在研究trino on yarn 功能,网上大部分都是关于presto on yarn文章,关于trino on yarn 资料很少,但是本质上差不多,需要修改一些内容,主要在调试方面这个slider不是很方便,分享下实践过程。 如果Trino集群没有弹性扩缩容需求或者已经有很成熟的K 阅读全文
posted @ 2023-08-29 14:22 liuzx8888 阅读(509) 评论(0) 推荐(0) 编辑
摘要: 熟悉Trino 的同学应该都知道Trino新增、删除 catalog 都需要重启集群,这个生产环境里如果需要频繁增加数据源的场景是非常不友好的操作。网上关于动态加载Catalog的方案有一些,但是在Trino比较新的版本里面已经无法适用。 目前官方关于这个功能一直都没有完成,详细issue Dyna 阅读全文
posted @ 2023-08-16 18:20 liuzx8888 阅读(895) 评论(2) 推荐(1) 编辑
摘要: 最近在测试flink从trino查询数据插入到phoenix5的功能,发现一个时间的问题: 明明插入的时间是 '1940-06-01',查询出来的时间会少一天,同样的 Timestamp 也会自动少掉 8个小时,详细原因参考 Phoenix关于时区的处理方式说明。但是文章中阿里的已经处理,但是社区版 阅读全文
posted @ 2023-07-28 11:03 liuzx8888 阅读(192) 评论(0) 推荐(0) 编辑
摘要: 最近在测试Hbase在windows上的单机版的功能。 版本:hadoop 2.7.7 hbase 2.0.0 错误: ERROR datanode.DataNode: BlockSender.sendChunks() exception: java.io.IOException: 你的主机中的软件 阅读全文
posted @ 2023-05-20 22:40 liuzx8888 阅读(315) 评论(0) 推荐(0) 编辑
摘要: 最近公司需要用Greenplum,在调用 jdbc的时候遇到了一些问题。由于我们前提的业务都是使用 sqlserver,sqlserver的 procedure 在前端展示做数据源的时候才用的非常多,很多procedure 都是返回了多个结果集,这种需求在greenplum实现起来就没有sqlser 阅读全文
posted @ 2021-09-27 17:30 liuzx8888 阅读(124) 评论(0) 推荐(0) 编辑
摘要: presto需要访问kudu数据源,但是impala可以直接支持多数据库存储,但是presto不能原生支持,按照presto的官网设置了然而并不起作用。 官方文档: 到官方github提问了,然后并没有答复。怎么设置都是无法起作用,有点无从下手的。 查看了官方kudu文档,无意中看到一个关于 Usi 阅读全文
posted @ 2020-12-02 12:04 liuzx8888 阅读(1265) 评论(0) 推荐(0) 编辑
摘要: 最新编译Apache-impala 的心酸历程。大概花了10天才整好,极度的崩溃!!!由于国内的上网环境大家都懂的,访问国外的s3.amazonaws.com一些资源库的速度极其感人,尤其国家处于疫情的特殊时期,各种KXSW被墙,如果你有高速上网通道,你可以忽略本文,安装官方文档直接编译就行,在Go 阅读全文
posted @ 2020-02-10 14:10 liuzx8888 阅读(3137) 评论(13) 推荐(0) 编辑