08 2016 档案

hadoop2.x常用端口
摘要：组件 节点 默认端口 配置 用途说明 HDFS DataNode 50010 dfs.datanode.address datanode服务端口，用于数据传输 HDFS DataNode 50075 dfs.datanode.http.address http服务的端口 HDFS DataNode 阅读全文
posted @ 2016-08-29 18:03 大雨点 阅读(16) 评论(0) 推荐(0) 编辑
Cloudera的CDH和Apache的Hadoop的区别
摘要：目前而言，不收费的Hadoop版本主要有三个（均是国外厂商），分别是：Apache（最原始的版本，所有发行版均基于这个版本进行改进）、Cloudera版本（Cloudera’s Distribution Including Apache Hadoop，简称CDH）、Hortonworks版本(Hor 阅读全文
posted @ 2016-08-26 09:41 大雨点 阅读(17) 评论(0) 推荐(0) 编辑
CDH 的Cloudera Manager免费与收费版的对比表
摘要：CDH 特性 免费版 付费版 Deployment, Configuration & Management 系统管理 Automated Deployment & Hadoop Readiness Checks 自动化部署及快速检查 • • Install the complete CDH stac 阅读全文
posted @ 2016-08-26 09:41 大雨点 阅读(65) 评论(0) 推荐(0) 编辑
RAID详解[RAID0/RAID1/RAID10/RAID5]
摘要：一．RAID定义 RAID(Redundant Array of Independent Disk 独立冗余磁盘阵列)技术是加州大学伯克利分校1987年提出，最初是为了组合小的廉价磁盘来代替大的昂贵磁盘，同时希望磁盘失效时不会使对数据的访问受损 失而开发出一定水平的数据保护技术。RAID就是一种由多 阅读全文
posted @ 2016-08-18 12:27 大雨点 阅读(12) 评论(0) 推荐(0) 编辑
SparkSQL与Hive的整合
摘要：SparkSQL与Hive的整合 1. 拷贝$HIVE_HOME/conf/hive-site.xml和hive-log4j.properties到 $SPARK_HOME/conf/ 2. 在$SPARK_HOME/conf/目录中，修改spark-env.sh，添加 export HIVE_HO 阅读全文
posted @ 2016-08-17 09:32 大雨点 阅读(11) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示