2022年1月4日
spark 执行spark-example
摘要： 1. 找到CDH 安装spark的目录 执行 which spark-shell /usr/bin/spark-shell 执行 ll /usr/bin/spark-shell lrwxrwxrwx 1 root root 29 12月 11 14:29 /usr/bin/spark-shell - 阅读全文
posted @ 2022-01-04 18:45 明月照江江 阅读(355) 评论(0) 推荐(0) 编辑
解决CDH 访问权限问题
摘要： CDH 6.2 安装好以后，直接使用root 或者 其他账号执行spark-shell 会报权限错误 22/01/04 17:46:28 ERROR spark.SparkContext: Error initializing SparkContext. org.apache.hadoop.secu 阅读全文
posted @ 2022-01-04 17:56 明月照江江 阅读(293) 评论(0) 推荐(0) 编辑
CDH6.2.0 搭建大数据集群
摘要： 1. 资料准备 现在官网https://www.cloudera.com 需要注册账号，未来可能会收费等问题，十分麻烦，这里有一份我自己百度云的备份 链接: https://pan.baidu.com/s/1kh50Z2f9S09Ln8E8uOow8Q 提取码: b9jf 里面有一整套下载内容 比如 阅读全文
posted @ 2022-01-04 16:08 明月照江江 阅读(240) 评论(0) 推荐(0) 编辑