11 2020 档案

• spark 错误 How to set heap size in spark within the Eclipse environment?
  摘要：1、In Eclipse go to Run > Run Configurations... > Arguments > VM arguments and set max heapsize like -Xmx512m. 2、idea 同样 3、Intellij IDEA运行报Command line 阅读全文
  posted @ 2020-11-27 10:02 bug_x 阅读(76) 评论(0) 推荐(0)
• hadoop 常用命令
  摘要：创建一个文件夹 hdfs dfs -mkdir /myTask 创建多个文件夹 hdfs dfs -mkdir -p /myTask1/input1 上传文件 hdfs dfs -put /opt/wordcount.txt /myTask/input 查看总目录下的文件和文件夹 hdfs dfs 阅读全文
  posted @ 2020-11-17 20:36 bug_x 阅读(96) 评论(0) 推荐(0)
• windows 安装hadoop 3.2.1
  摘要：问题： 1、 Java installed version: 1.8.0_231 Hadoop installed version: Hadoop 3.2.1 But after running command hdfs namenode -format I'm getting following 阅读全文
  posted @ 2020-11-17 16:54 bug_x 阅读(1015) 评论(1) 推荐(0)
• windows JAVA_HOME 路径有空格，执行软连接
  摘要：hadoop. maven 这么用最好用 1、 F:\ruan_java_home mklink /J F:\ruan_java_home “C:\Program Files (x86)\Java\jdk1.8.0_202” mklink /J "e:\test" "f:\test" "e:\tes 阅读全文
  posted @ 2020-11-17 16:40 bug_x 阅读(694) 评论(0) 推荐(0)