hadoop - 随笔分类 - 弦灬烨

hive安装用mysql作为元数据库，mysql的设置

摘要：mysql的设置在要作为元数据库的mysql服务器上建立hive数据库：或者创建专门访问hive的用户：并将mysql jdbc驱动放入hive/lib目录下。注：grant all privileges on来更改用户对应某些库的远程权限需要注意mysql的配置文件中的bindaddre 阅读全文

posted @ 2018-02-28 10:00 弦灬烨阅读(1852) 评论(0) 推荐(0) 编辑

HDFS文件系统的JAVA-API操作(一)

摘要：HDFS文件系统的JAVA-API操作(一) 要点导航实例1：使用java.net.URL访问HDFS文件系统实例2：使用FileSystem访问HDFS文件系统实例3：创建HDFS目录实例4：删除HDFS目录实例5：查看文件或目录是否存在实例6：列出目录下的文件或目录名称实例7：查看阅读全文

posted @ 2017-12-28 16:24 弦灬烨阅读(6748) 评论(0) 推荐(0) 编辑

hadoop集群环境配置成功与否查看方法

摘要：1.Hadoop启动jobhistoryserver来实现web查看作业的历史运行情况，由于在启动hdfs和Yarn进程之后，jobhistoryserver进程并没有启动，需要手动启动jobhistory 如：sbin/mr-jobhistory-daemon.sh start historyse 阅读全文

posted @ 2017-12-01 16:20 弦灬烨阅读(967) 评论(0) 推荐(0) 编辑

搜索

常用链接

随笔分类

随笔档案

阅读排行榜

评论排行榜

推荐排行榜

最新评论

随笔分类 - hadoop