07 2019 档案

本地连接 HDFS 报错 Exception in thread "main" org.apache.hadoop.security.AccessControlException: org.apache.hadoop.security.AccessControlException: Permission denied: user=JM.H,access=WRITE, inode="":r
摘要：此时 到hdfs机器下修改hdfs-site.xml即可 添加如下配置 阅读全文
posted @ 2019-07-18 09:00 今天早点睡 阅读(983) 评论(0) 推荐(0)
HDFS 命令行基本操作
摘要：1.hdfs命令行 （1）查看帮助 hdfs dfs -help （2）查看当前目录信息 hdfs dfs -ls / （3）上传文件 hdfs dfs -put /本地路径 /hdfs路径 （4）剪切文件 hdfs dfs -moveFromLocal a.txt /aa.txt （5）下载文件到 阅读全文
posted @ 2019-07-17 10:07 今天早点睡 阅读(33583) 评论(0) 推荐(2)
在CentOS 7环境下安装 Spark
摘要：1、下载Spark安装包：http://mirror.bit.edu.cn/apache/spark/ 2、解压Spark的安装包并更改名称： （1）tar -zxvf spark-2.4.3-bin-hadoop2.7.tgz （2）mv spark-2.4.3-bin-hadoop2.7.tgz 阅读全文
posted @ 2019-07-15 17:33 今天早点睡 阅读(2060) 评论(0) 推荐(0)
CentOS7 环境下 在Hadoop集群安装Hive
摘要：1、下载Hive的tar.gz包：http://mirror.bit.edu.cn/apache/hive/ 2、放入CentOS 7 系统中并解压：tar -zxvf apache-hive-2.3.3-bin.tar.gz 3、修改文件的名字：mv apache-hive-2.3.3-bin.t 阅读全文
posted @ 2019-07-15 17:30 今天早点睡 阅读(1156) 评论(0) 推荐(0)
Maven下载Jar包（bat脚本）
摘要：1、创建一个bat文件叫download.bat 2、里面写入以下代码 3、创建pom.xml文件 4、写入内容（把你需要下载的jar包的Maven放入dependencies） 5、双击Bat文件，启动脚本就会自动下载了。 阅读全文
posted @ 2019-07-10 14:11 今天早点睡 阅读(958) 评论(0) 推荐(1)
大数据工具下载路径
摘要：Apache软件基础发行目录：http://mirror.bit.edu.cn/apache/ Apache软件基础分发目录：https://archive.apache.org/dist/ 1、Hadoop下载路径：http://mirror.bit.edu.cn/apache/hadoop/co 阅读全文
posted @ 2019-07-10 14:07 今天早点睡 阅读(357) 评论(0) 推荐(0)
在CentOS7环境下安装Mysql
摘要：1、wget http://dev.mysql.com/get/mysql57-community-release-el7-11.noarch.rpm // 下载mysql yum源 2、rpm -ivh mysql57-community-release-el7-11.noarch.rpm // 阅读全文
posted @ 2019-07-03 17:07 今天早点睡 阅读(1894) 评论(1) 推荐(1)
在CentOS7下安装JDK1.8
摘要：1、下载JDK1.8的tar.gz的压缩包 2、解压tar.gz压缩包 3、创建文件夹并把文件剪切进文件夹内 3、配置环境变量 4、保存退出 5、刷新环境变量 6、查看是否安装 成功 阅读全文
posted @ 2019-07-03 16:27 今天早点睡 阅读(288) 评论(0) 推荐(0)