2015年12月21日

RHadoop和CDH整合实例（三）- RHive

摘要： 五、 RHive的安装及测试RHive依赖于Rserve，所有首先需要安装Rserve(在各个namenode上)，接下来在所有节点上启动Rserve：> sudo R > install.packages("Rserve") > q() > Rserve --RS-conf /usr/l... 阅读全文

posted @ 2015-12-21 23:35 cassie_huang89 阅读(596) 评论(0) 推荐(1) 编辑

RHadoop和CDH整合实例（二）- rmr2及RJDBC

摘要： 三、 rmr2的安装和测试 rmr2是map/reduce程序执行的核心部分，需要依赖hadoop-streaming-XXX.jar。rmr2库需要依赖bitops和 caTools两个库，而这两个库都不能直接通过R的install.packages()获得，需要先去cran上下载再安装，同样... 阅读全文

posted @ 2015-12-21 23:20 cassie_huang89 阅读(579) 评论(0) 推荐(1) 编辑

RHadoop和CDH整合实例（一）- R及rhdfs

摘要： 最近需要在hadoop上集成R语言环境进行统计分析任务，考虑用到RHadoop。但是由于集群上的hadoop并非原生态hadoop，而是cloudera集成的版本，并且由于系统上kerberos和sentry的安全管理机制，给集成RHadoop造成了不小的麻烦。网上搜索的步骤和问题有一些已经过... 阅读全文

posted @ 2015-12-21 23:04 cassie_huang89 阅读(742) 评论(0) 推荐(2) 编辑

导航