01 2022 档案
摘要：如图：这一段时间每次要打包的时候就找不到 maven 对话框，好气呀 下面介绍一个快捷键 Ctrl+Shift+A 然后在弹出的框框里输入 maven 再回车 即可
阅读全文
摘要：json是常见的一种数据格式，一般通过埋点程序获取行为用户行为数据，将多个字段存放在一个json数组中，因此数据平台调用数据时，要对json数据进行解析处理。接下来介绍下Hive中是如何解析json数据的。 hive 解析 json 数据函数 1、get_json_object 语法：get_jso
阅读全文
摘要：建表 create table temp.jc_t_test_map_array ( id int, name string, hobby array<string>, -- array中元素为string类型 friend map<string,string>, -- map中键和值均为strin
阅读全文
摘要：场景 有木有发现工作中偶尔有些大量的null值或者一些无意义的数据参与到计算作业中，任务跑的贼慢，表中有大量的null值，如果表之间进行join关联操作，就会有shuffle产生，这样所有的null值都会集中在一个reduce中，会产生数据倾斜，降低作业效率。辣么我们该如何避免这种囧况呢，现在给大家
阅读全文
摘要：nvl 和 coalesce 说明 nvl 和 coalesce 是 HSQL 中常用的 空值处理函数，今天给大家聊聊这两个函数的使用细节、 数据准备 先建表插入两条测试数据 create table temp.jc_test_coalesce_nvl ( c1 int, c2 int, c3 in
阅读全文
摘要：问题描述 由于更改了 /etc/my.cnf 需要重启下 mysql 服务，但是重启服务报错了： 经过多发查询发现遇到这样的错误，是由于 /etc/init.d/ 不存在 mysqld 这个命令（有的人安装完环境后存在，是因为你的安装包中有这样的命令将 mysql.server 文件 copy 到
阅读全文
摘要：今天启动kafka 后 发现只有一个节点启动成功，另两个节点启动失败，查看日志如下 经多方查验，原来是之前未正常关闭服务导致 解决方案 根据日志提示，我们需要手动删除每个partition下的 两个索引文件， 重新启动集群，kafka会自动重建索引文件 find /opt/module/kafka/
阅读全文
