摘要: 1、测试环境 (1)Derby:Hive里自带引擎存储元数据信息,当三个客户端同时访问Hive时,Derby支持不了。 (2)client、hive、mysql、derby 2、生产环境 (1)client、hive、mysql、备份mysql (2)hive指向的是一个虚的地址,既不是active 阅读全文
posted @ 2021-07-28 16:49 酱汁怪兽 阅读(58) 评论(0) 推荐(0) 编辑
摘要: 1、Hive体系架构 (1)Command-line shell:client在命令行shell上写sql,写完后提交给Hive引擎上。 (2)Thrift/JDBC:看做server/jdbc。Thrift是一种协议,把Hive起成一个服务server,通过JDBC的方式提交sql。额外可以看看W 阅读全文
posted @ 2021-07-28 16:28 酱汁怪兽 阅读(236) 评论(0) 推荐(0) 编辑
摘要: 1、Hive的存在可以简化MapReduce实现过程 (1)MapReduce编程的不便 (2)传统关系型数据库RDBMS人员的需要 (3)HDFS上的文件没有schema的概念:即没有表明、字段名、字段类型等信息。仅仅是一个字符串的文件。 2、Hive是什么? (1)由Facebook开源,用于解 阅读全文
posted @ 2021-07-28 15:56 酱汁怪兽 阅读(350) 评论(0) 推荐(0) 编辑
摘要: 1、更改输入、输出路径 (1)输入路径为:args[0] (2)输出路径为:args[1] 2、修改IPParser.java src/main/java/project/utils/IPParser.java 目前本机的IP库是放在ip/qqwry.dat 要修改为: //本机ip库路径 //pr 阅读全文
posted @ 2021-07-28 15:02 酱汁怪兽 阅读(66) 评论(0) 推荐(0) 编辑