2023年11月2日

javaapi、spark、flink 创建Iceberg表,hive 和impala无法正常读取解决

摘要: spark、flink 创建Iceberg表中,元数据存储在hive 的meta_store,发现hive 或者impala无法正常读取报错。事实上解决方案是 在spark 、flink 的SQL中执行语句: add iceberg相关引擎的runntime的jar;ALTER TABLE t SE 阅读全文

posted @ 2023-11-02 15:25 一九七 阅读(291) 评论(0) 推荐(0) 编辑

2023年8月21日

hive sql运行时候reduce 只有2个问题解决

摘要: 我们在explan sql 时候发现 width 是负数,事实上原因 width是通过data Size / rowNum计算出来的,这两个参数都是在执行计划中根据每个operator通过stats计算出来的。对于select query来说,data size是根据column stats、尤其是 阅读全文

posted @ 2023-08-21 15:30 一九七 阅读(79) 评论(0) 推荐(0) 编辑

2023年6月11日

windows 安装docker desktop 报错

摘要: 安装docker 时报错: JSON 字符串无效。 (异常来自 HRESULT:0x83750007) 在 Windows.Data.Json.JsonValue.Parse(String input) 在 CommunityInstaller.InstallWorkflow.SetupBacken 阅读全文

posted @ 2023-06-11 21:40 一九七 阅读(565) 评论(0) 推荐(0) 编辑

2023年2月26日

解决habbybase 操作hbase报错TTransportException(type=4,message=’TSocket read 0 bytes)

摘要: 1.确认集群的协议是否一致,在连接的时候,改成一致的.例如集群配置的是TFramedTransport,TCompactProtocol 时 改成 connection = happybase.Connection('localhost', port=9090,transport='framed', 阅读全文

posted @ 2023-02-26 16:36 一九七 阅读(165) 评论(0) 推荐(0) 编辑

解决python 操作 hbase报错:TTransportException(type=4,message=’TSocket read 0 bytes’)

摘要: ```text# 解决报错:hbase报错TTransportException(type=4,message=’TSocket read 0 bytes’)这种情况一般协议问题和服务端没开启,如果服务端是开启的,且正常的.那么考虑协议没有一致.在解决问题之前,需要了解一下Facebook 的thr 阅读全文

posted @ 2023-02-26 14:39 一九七 阅读(656) 评论(0) 推荐(0) 编辑

2019年3月2日

easyExcel-modle

摘要: package com.alibaba.easyexcel.test.model;import com.alibaba.excel.annotation.ExcelProperty;import com.alibaba.excel.metadata.BaseRowModel;import java. 阅读全文

posted @ 2019-03-02 23:54 一九七 阅读(121) 评论(0) 推荐(0) 编辑

easyExcel

只有注册用户登录后才能阅读该文。 阅读全文

posted @ 2019-03-02 23:50 一九七 阅读(12) 评论(0) 推荐(0) 编辑

2018年1月14日

redis相关入门知识

摘要: redis介绍:是一种基于键值对的NoSql数据库,与许多键值对数据库不同是,它可以由string,hash,list,set,zest(有序集合)、Bitmaps(位图)、HyperLogLog、GEO等多种数据结构和算法组成。 特性: 1)速度快,官方数据给出是10万每秒(暂不考虑机器性能下)。 阅读全文

posted @ 2018-01-14 11:10 一九七 阅读(94) 评论(0) 推荐(0) 编辑

导航