基于CentOS6.5-Hadoop2.7.3-hive-2.1.1安装sqoop1.4.7
注:图片如果损坏,点击文章链接:https://www.toutiao.com/i6627736198431375879/
系统版本,Hadoop已安装完成。链接《CentOS6.5下安装Hadoop-2.7.3(图解教程)》
Mysql安装完成
Hive版本 链接《CentOS6.5-Hadoop2.7.3安装hive-2.1.1》
工具已经上传
我们将文件解压到制定目录
查看文件
修改下文件名
修改环境变量
添加以下内容
export SQOOP_HOME=/opt/bigdata/sqoop
export PATH=$SQOOP_HOME/bin:$PATH
让配置生效
我们查看版本,出现权限错误
我们修改下权限,又出现一个新的问题
因为我们的压缩包是从他人哪里拷贝过来的,配置上有问题,我们找下配置,坐下修改
这个文件
我们看到里面的配置
修改如下
我们继续查看版本
这个地方提示我们需要安装hbase等工具,我们暂时不做安装,继续往下。
将mysql-connector-java-*.jar拷贝到下面的目录中
因为我们没有基于hadoop安装HBase,所以HBase相关的命令不能用,但是操作hadoop分布式文件系统的命令是可以用的
我们看下表格
使用命令查看MySQL数据库中的数据表list,命令是(命令中不能有回车,必须是在同一行)
sqoop list-tables --username hive --password 'hive' --connect jdbc:mysql://localhost:3306/hello?characterEncoding=UTF-8
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 10年+ .NET Coder 心语,封装的思维:从隐藏、稳定开始理解其本质意义
· .NET Core 中如何实现缓存的预热?
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
· 基于Microsoft.Extensions.AI核心库实现RAG应用
· TypeScript + Deepseek 打造卜卦网站:技术与玄学的结合
· 阿里巴巴 QwQ-32B真的超越了 DeepSeek R-1吗?
· 【译】Visual Studio 中新的强大生产力特性
· 10年+ .NET Coder 心语 ── 封装的思维:从隐藏、稳定开始理解其本质意义
· 【设计模式】告别冗长if-else语句:使用策略模式优化代码结构