2019年7月26日
hadoop以及hdfs概括
摘要： 大数据技术生态架构 1）来源层：1.数据库 2.日志信息 3.视频、ppt2）传输层：1.Sqoop：数据库导入导出2.Flume处理读写日志 3.Kafka缓存数据3）存储层：1.HDFS 存储数据 2.kafka也能存储一部分 3.hbase 键值对 4）资源管理层：yarn负责调度磁盘、内存。 阅读全文
posted @ 2019-07-26 16:18 Languid 阅读(287) 评论(0) 推荐(0) 编辑