01 2024 档案

SparkSQL无法创建多个Session解决方法

摘要：一、问题现象 SparkSQL创建多个session报错，不能创建一个链接，链接Spark自带的数据库derby 2024-01-25 19:50:59.053 [INFO ]24/01/25 19:50:59 INFO !PLExecution!: Execute SQL: DROP TABLE 阅读全文

posted @ 2024-01-29 19:38 虎啸千峰阅读(98) 评论(0) 推荐(0) 编辑

Spark版本不兼容导致Standalone集群无法连接问题

摘要：一、Spark版本不一致报错现象当使用client模式连接Spark的standalone集群时，报错所有的spark master的节点都没有回应。二、问题排查思路通过client端的日志产看没有什么有价值的信息，需要看下spark端的master的日志，docker logs spark- 阅读全文

posted @ 2024-01-13 14:45 虎啸千峰阅读(378) 评论(0) 推荐(0) 编辑

Spark读写达梦数据库报错Decimal精度为负数以及解决方案

摘要：一、Spark读取DM数据库问题描述当达梦的表格设计使用number数据类型时，如果没有指定精确，使用默认值，如下图所示则在读取该表格数据时，报错如下： 24/01/12 10:43:48 ERROR Node: [47db01a8b6ff47e7840cb0a777033721]:compon 阅读全文

posted @ 2024-01-13 11:47 虎啸千峰阅读(418) 评论(0) 推荐(0) 编辑

防火墙添加允许服务器IP和端口方法

摘要：一、检测防火墙命令 systemctl status firewalld 如果显示如下active表示防火墙开启 ● firewalld.service - firewalld - dynamic firewall daemon Loaded: loaded (/usr/lib/systemd/sy 阅读全文

posted @ 2024-01-12 16:27 虎啸千峰阅读(1474) 评论(0) 推荐(0) 编辑