摘要: 在传统数据库里,表的模式是在数据加载时强制确定的。如果在加载时发现数据不符合模式,则被拒绝加载数据。因为数据是在写入数据库是对照模式进行检查,因此这一设计有时被称为“写时模式”(schema on write)。 Hive这种类型的数据处理模式对数据的验证并在不加载数据时进行,而在查询时进行。这称为 阅读全文
posted @ 2018-03-26 17:22 buoge 阅读(1709) 评论(0) 推荐(0) 编辑
摘要: 起因是我运行wordcount测试一直卡主,不能执行,一直处于 Accept 状态,等待被执行,刚开始是各种配置yarn参数,以及host配置,后来发现还是不行 hadoop 集群安装完成后,在50070的 HDFS 管理后台能看到,livenode 为2, 但是在 YARN 的资源管理后台,htt 阅读全文
posted @ 2018-03-26 16:55 buoge 阅读(481) 评论(0) 推荐(0) 编辑