万事胜意k - 博客园

2023年8月10日

Anaconda 清华源连接失败原因与解决CondaHTTPError SSLError

摘要：解决方法 https://blog.csdn.net/kxqt233/article/details/121167753 我是使用下面这个方法解决的： ssl_verify: false 方法有效我的是从清华大学 Anaconda 镜像使用帮助复制来的代码,其中 show_channel_urls 阅读全文

posted @ 2023-08-10 22:57 万事胜意k 阅读(323) 评论(0) 推荐(0) 编辑

Spark安装(黑马程序员文档)

摘要： Spark Local环境部署下载地址 Spark https://mirrors.tuna.tsinghua.edu.cn/apache/spark/spark-3.4.1/ Anaconda https://mirrors.tuna.tsinghua.edu.cn/anaconda/archi 阅读全文

posted @ 2023-08-10 21:47 万事胜意k 阅读(250) 评论(0) 推荐(0) 编辑

Zookeeper安装

摘要：简介 ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件，提供的功能包括：配置维护、域名服务、分布式同步、组服务等。除了为Hadoop和HBase提供协调服务外，Zookeeper也被其它许多软件采用作阅读全文

posted @ 2023-08-10 17:06 万事胜意k 阅读(34) 评论(0) 推荐(0) 编辑

2023年8月8日

Sqoop 连接mysql 错误 java.lang.NoClassDefFoundError（已解决）

摘要：错误信息 Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/commons/lang/StringUtils at org.apache.sqoop.manager.MySQLManager.initOptio 阅读全文

posted @ 2023-08-08 17:02 万事胜意k 阅读(127) 评论(0) 推荐(0) 编辑

Apache Sqoop安装

摘要： 1.切换到/export/server 2.上传并解压 tar zxvf sqoop-1.4.7.bin__hadoop-2.6.0 3.设置软连接 ln -s sqoop-1.4.7.bin__hadoop-2.6.0 sqoop 4.切换到/sqoop/conf 将sqoop-env-templ 阅读全文

posted @ 2023-08-08 17:01 万事胜意k 阅读(44) 评论(0) 推荐(0) 编辑

《天道》——格律诗乐器的生产流程和质量控制流程

摘要：一、生产流程格律诗乐器的制作流程可以分为数个关键步骤，每一步都要经过严格的工艺要求和精细的操作，以保证最终乐器的音质和外观达到最佳状态。 1 原材料选择与准备格律诗乐器的制作以优质的原材料为基础。传统制作中，常使用高质量的木材、竹子、象牙等。在现代制作中，也可以采用一些现代材料来保证乐器的稳定性阅读全文

posted @ 2023-08-08 15:12 万事胜意k 阅读(23) 评论(0) 推荐(0) 编辑

2023年8月5日

暑假第五周总结

摘要：本周花在学习上的时间大概为20小时，花在代码上的时间大概为10小时。花在解决问题上的时间大概为3小时。本周，我学习了Sqoop,Sqoop主要用于Hadoop（hive）与传统的数据库（mysql，orcle，…）之间进行数据传递,还学习了sqoop导入数据和导出数据的基本语法并进行了实践。阅读全文

posted @ 2023-08-05 08:15 万事胜意k 阅读(13) 评论(0) 推荐(0) 编辑

2023年8月3日

FineBI连接hive出现中文乱码问题（已解决）

摘要：出现下列情况解决方法： hive 的注释(comment) 中文乱码的解决方法解决后阅读全文

posted @ 2023-08-03 10:48 万事胜意k 阅读(323) 评论(0) 推荐(0) 编辑

2023年7月29日

暑假第四周总结

摘要：本周花在学习上的时间大概为22小时，花在代码上的时间大概为12小时。花在解决问题上的时间大概为4小时。本周，我用大数据技术进行了具体的实践，包括需求分析、加载数据、ETL数据清洗转换、指标统计以及用BI进行可视化展示。阅读全文

posted @ 2023-07-29 16:58 万事胜意k 阅读(9) 评论(0) 推荐(0) 编辑

2023年7月22日

暑假第三周总结

摘要：本周花在学习上的时间大概为21小时，花在代码上的时间大概为11小时。花在解决问题上的时间大概为4小时。本周，我学习了hive数据库的使用及外部客户端(DataGrip)链接hive，包括创建数据库，删除数据库，数据库和hdfs的关系，创建表的语法，数据类型，内部表，外部表，数据的导入和导出，分区表，阅读全文

posted @ 2023-07-22 08:46 万事胜意k 阅读(12) 评论(0) 推荐(0) 编辑

ysk0904

公告