摘要：
1 下载Sqoop 下载地址：https://archive.apache.org/dist/sqoop/ 2 安装Sqoop 将Sqoop包上传，这里使用了Xftp 进入Sqoop安装包目录，安装 tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz 为了方 阅读全文
摘要：
进入Hive元存储数据库，这里为MySQL 修改字段注释字符集 alter table COLUMNS_V2 modify column COMMENT varchar(256) character set utf8; 修改表注释字符集 alter table TABLE_PARAMS modify 阅读全文
摘要：
0 准备工作 启动了Hadoop 启动了Hive元存储数据库 1 开启Hive远程连接服务 nohup hiveserver2 1>/dev/null 2>&1 & nohup：用户即使退出，程序也会在后台运行 1：标准输出 2：错误输出 /dev/null：Linux中的黑洞,表示不存储信息 &： 阅读全文
摘要：
解决方法： 在hadoop配置文件core-site.xml添加，将root替换为你的用户名 使用通配符值 * 来允许来自任何主机或任何用户的模拟。例如，通过在core-site.xml中指定如下，从任何主机访问的名为 oozie 的用户都可以模拟属于任何组的任何用户。 <property> <na 阅读全文
摘要：
0 准备工作 搭建Hadoop完全分布式集群：Hadoop完全分布式集群搭建 下载安装MySQL：CentOS7 MySQL安装 1 下载Hive Hive官网：https://hive.apache.org/general/downloads/ 找到适配自己Hadoop版本的Hive 找到后进入下 阅读全文
摘要：
0 准备工作 yum换源：https://www.cnblogs.com/lgjb/p/17293111.html 1 下载yum Repository wget -i -c http://dev.mysql.com/get/mysql57-community-release-el7-10.noar 阅读全文
摘要：
1 备份 mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.backup 2 下载新的 CentOS-Base.repo 到 /etc/yum.repos.d/ CentOS 6 curl -o /etc/y 阅读全文
摘要：
DLLs：python的动态链接库，跟编译器有关，和python 编程关系不大。 Doc：python的参考书，有很多实例。 lnclude：python编译器的C语言源码。 Lib：这个库很重要，是python的标准库，你扩充的库都安装在这里面。 libs：python的内置库，语法存在的地方。 阅读全文
摘要：
Namenode默认端口： | 端口 | 介绍 | | | | | 9820 | NameNode默认的内部端口 | | 9870 | NameNode的web访问（http访问）端口 | | 9871 | NameNode的web访问（https访问）端口 | Secondary Namenode 阅读全文
摘要：
1 检查当前系统中是否已安装JDK yum list installed | grep java 2 卸载Java，若未检测出jdk则跳过 yum remove 检测出的包 3 安装JDK 3.1 选择到jdk官网上下载你想要的jdk版本。 下载地址：https://www.oracle.com/j 阅读全文