摘要:
1.union union的使用场景 当hive使用连接查询时它有一个必要的限制,必须要两个结果集有关系才能进行连接, 当两个结果集没有任何关系时可以用union关键字进行两个结果集的集合展示 union的特性 union在查出结果集会对结果集进行排序,这是mapreduce的特性 union使用时 阅读全文
摘要:
在hive客户端建一张表比如bb 条件bb与cc表结构相同,cc有数据,把cc的数据导到bb里 hive -e是为了解决每次进入客户端的麻烦操作,使用了hive -e命令,可以在hive客户端外对客户端进行操作, 例如 hive -e "use aaa;select * from cc limit 阅读全文
摘要:
协议就相当于是语言,相同的语言能够互相理解 HTTP协议的方法包括:GET,POST GET:不改变网站的状态 POST:改变网站的状态 POST:登录,注册,补充信息 登录之后服务器会记录你已经登录的,有这个记录,服务器的状态就已经改变了 注册之后服务器就会记录你注册的信息,相当于状态改变了 补充 阅读全文
摘要:
hbase的列族 hbase的列族存储的是相同IO属性的数据,每个文件对应hdfs上的一个文件 在hbase建表时需要指定有多少个列族 对列族进行管理的是HRegion hbase的region 假设有个db1表,它有10000行数据,2500行存储在一个region里, region编号 star 阅读全文
摘要:
本地运行mr的参数设置 Configuration conf = new Configuration(); 本地运行mr程序时,输入输出数据可以在本地,也可以在hdfs上 数据在hdfs conf.set("fs.defaultFS","file:///"); Job job = Job.getIn 阅读全文
摘要:
商品信息表goods cat_id goods_name cost_price shop_price 1 123 荣耀畅玩5X 智能手机 900.00 999.00 2 123 华为Meta 8 64GB 3500.00 3699.00 3 130 三星55M5 智能液晶电视 3500.00 379 阅读全文
摘要:
row_number() 给每一条select查询到的数据进行排序加一个序号,从1开始 员工 部门 工资 empid deptid salary 1 10 5500 2 10 4500 3 20 1900 4 20 4800 5 40 6500 6 40 14500 7 40 44500 8 50 阅读全文