摘要: 一、测试代码 public void testEquals() { int int1 = 12; int int2 = 12; Integer integer1 = new Integer(12); Integer integer2 = new Integer(12); Integer intege 阅读全文
posted @ 2024-04-22 15:06 黑水滴 阅读(27) 评论(0) 推荐(0) 编辑
摘要: 一、资料准备 1、mysql地址选择 因为阿里云只读节点binlog保留时间短,需要用读写集群地址。可以登录阿里云控制台查看地址是只读还是读写,不清楚的话可以找dba要读写地址。 二、Iceberg概念 1、Iceberg选择合适的表版本 简述:Iceberg目前有两个表版本(V1和V2),根据数据 阅读全文
posted @ 2024-04-22 12:15 黑水滴 阅读(321) 评论(0) 推荐(0) 编辑
摘要: 一、问题追踪 问题 详细描述 提出问题时间 是否完成 计划完成时间 备注 了解Iceberg数据存储方式 了解元数据存储信息、数据组织方式、查询时处理流程等 20231013 是 20231019 !!!20231124前均为大致的时间 调研报告:调研报告-基于 Iceberg 构建湖仓一体平台调研 阅读全文
posted @ 2024-04-22 10:55 黑水滴 阅读(38) 评论(0) 推荐(0) 编辑
摘要: 一、登录spark客户端 spark-sql --master yarn \ --deploy-mode client \ --queue default \ --name wang \ --driver-memory 12G \ --num-executors 10 \ --executor-co 阅读全文
posted @ 2024-04-22 10:48 黑水滴 阅读(55) 评论(0) 推荐(0) 编辑
摘要: 一、安装 1、root用户上传文件 cd wangrz -bey luoshu-1.0-bin.tar.gz 2、解压文件到服务目录 重新安装洛书需执行:rm -rf /usr/local/service/luoshu mkdir /usr/local/service/luoshu tar -zxf 阅读全文
posted @ 2024-04-22 10:45 黑水滴 阅读(12) 评论(0) 推荐(0) 编辑