ifiwereaboy - 博客园

2025年3月6日

摘要：我用的是spark2.3.0版本错误1：pyspark使用报错 root@hadoop102:/opt/module/spark/bin# pyspark Python 3.8.10 (default, Feb 4 2025, 15:02:54) [GCC 9.4.0] on linux Type 阅读全文

posted @ 2025-03-06 13:43 ifiwereaboy 阅读(14) 评论(0) 推荐(0) 编辑

2025年3月4日

hive on spark 踩坑记录

摘要：最近一直在弄hive on spark，明明选的spark 2.3.0和hive 3.0.0是兼容的，不知道为啥就是成功不了，今天终于解决了！坑一：spark java.lang.NoClassDefFoundError: org/apache/spark/SparkConf 参考解决：https 阅读全文

posted @ 2025-03-04 11:17 ifiwereaboy 阅读(24) 评论(0) 推荐(0) 编辑

2025年2月18日

记录安装HUE

摘要：记录 cd /opt/module/hue-master export PYTHON_VER=python3.8 export ROOT=/opt/module/hue-master PREFIX=/opt/module/hueMaster make install 最后的成功界面 cd /opt/ 阅读全文

posted @ 2025-02-18 13:29 ifiwereaboy 阅读(0) 评论(0) 推荐(0) 编辑

2025年1月21日

问题：linux（ubuntu）上安装的Anaconda里面的python覆盖了系统的python版本

摘要：参考文章：https://fanxinglanyu.blog.csdn.net/article/details/125070211?spm=1001.2101.3001.6650.2&utm_medium=distribute.pc_relevant.none-task-blog-2%7Edefau 阅读全文

posted @ 2025-01-21 14:27 ifiwereaboy 阅读(17) 评论(0) 推荐(0) 编辑

2024年3月27日

superset安装完整过程

摘要： 1.安装superset所需python依赖包 wtforms_json、flask_compress、celery、flask_migrate、flask_talisman、flask_caching、sqlparse、bleach、markdown、numpy、pandas、parsedatet 阅读全文

posted @ 2024-03-27 16:52 ifiwereaboy 阅读(1443) 评论(0) 推荐(0) 编辑

dolphinscheduler任务报错，日志显示dataX说脏数据过多了？

摘要：经DataX智能分析,该任务最可能的错误原因是: com.alibaba.datax.common.exception.DataXException: Code:[Framework-14], Description:[DataX传输脏数据超过用户预期，该错误通常是由于源端数据存在较多业务脏数据导致阅读全文

posted @ 2024-03-27 14:15 ifiwereaboy 阅读(772) 评论(1) 推荐(0) 编辑

2024年3月26日

安装miniconda3的时候报错Error loading Python lib '/opt/module/miniconda3/install_tmp/_MEItkgxtG/libpython3.10.so.1.0': dlopen: /lib64/libc.so.6: version `GLIBC_2.25' not found ···

摘要：想要在centos7上安装miniconda3（主要想安装superset），发现报如下错误: 看了该网友的经验贴https://blog.csdn.net/weixin_44479465/article/details/112703715 我查看了下自己的glibc版本，发现自己的版本是2.17，阅读全文

posted @ 2024-03-26 21:44 ifiwereaboy 阅读(854) 评论(0) 推荐(0) 编辑

2024年3月20日

dolphinscheduler这是怎么回事啊？

摘要：阅读全文

posted @ 2024-03-20 18:58 ifiwereaboy 阅读(6) 评论(0) 推荐(0) 编辑

2024年3月13日

hive源码重新编译报错

摘要： hive源码重新编译报错阅读全文

posted @ 2024-03-13 16:16 ifiwereaboy 阅读(10) 评论(0) 推荐(0) 编辑

2024年3月9日

Maxwell启动问题java.lang.RuntimeException: error: unhandled character set ‘utf8mb3‘

摘要：使用Maxwell碰到问题，查看日志后显示大概是这个问题java.lang.RuntimeException: error: unhandled character set ‘utf8mb3‘ 。网上查找，看了经验贴https://blog.csdn.net/weixin_44943845/art 阅读全文

posted @ 2024-03-09 17:59 ifiwereaboy 阅读(316) 评论(0) 推荐(0) 编辑

搜索

常用链接

随笔分类

随笔档案

阅读排行榜

评论排行榜

推荐排行榜

最新评论