随笔分类 -  Hadoop

hadoop - 基础操作
摘要：查看文件； [root@hadoop hadoop]# hadoop fs -lsr /drwxr-xr-x - root supergroup 0 2016-12-27 10:49 /homedrwxr-xr-x - root supergroup 0 2016-12-27 10:49 /home 阅读全文
posted @ 2018-05-04 19:06 01234567 阅读(155) 评论(0) 推荐(0) 编辑
Hadop 基础
摘要：HDFS 体系结构 mapreduce 体系结构和算法 haddop 集群 zookeeper 操作；HBase 体系结构Hive /Sqoop 体系结构和基本操作； mapreduce 逻辑处理数据；HDFS 存放海量数据； 结构与非结构化数据structured data ( RDBMS ) & 阅读全文
posted @ 2018-05-04 19:05 01234567 阅读(201) 评论(0) 推荐(0) 编辑
hadoop HA 配置 + zookeeper 服务注册
摘要：环境测试 6台机器 centos6.7 x64 节点服务部署： 配置文件： 配置core-site.xml 需要配置nameservice，hadoop 文件存储位置和Zookeeper集群来确保多个namenode之间的切换，修改后内容如下： 配置hdfs-site.xml hdfs-site.x 阅读全文
posted @ 2018-05-04 19:03 01234567 阅读(289) 评论(0) 推荐(0) 编辑
hadoop - hdfs 基础操作
摘要：hdfs --help # 所有参数 hdfs dfs -help # 运行文件系统命令在Hadoop文件系统 hdfs dfs -ls /logs # 查看 hdfs dfs -ls /user/ # 查看用户 hdfs dfs -cat hdfs dfs -df hdfs dfs -du h... 阅读全文
posted @ 2018-04-02 10:54 01234567 阅读(95) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示