2019年11月19日
HiveServer2和beeline
摘要： HiveServer2 1.为hive提供了一种允许客户端远程访问的服务。 2.基于thrift协议，支持跨平台，跨编程语言对hive访问； 3.允许远程访问hive； HiveServer2 支持一个新的命令行Shell，称为Beeline，它是基于SQLLine CLI的JDBC客户端。 下面是 阅读全文
posted @ 2019-11-19 20:19 Lucas_zhao 阅读(1802) 评论(0) 推荐(0) 编辑
Hive内部表和外部表
摘要： Hive表分为内部表和外部表 Hive默认建立的表是内部表，内部表create之后，然后load加载hdfs上的数据，会移动物理数据到Hive的数据仓库默认目录（/user/hive/warehouse/xx.db/)下。 内部表drop之后，元数据和物理数据都会删除。 外部表在导入hdfs的数据后 阅读全文
posted @ 2019-11-19 19:52 Lucas_zhao 阅读(2057) 评论(0) 推荐(0) 编辑
2019年11月17日
HashMap案例_商品统计
摘要： 给定商品ID，商品名称Name,商品价格Price,商品数量Number,统计每个商品下的ID。 结果如下： 显示器 -->> 1 4鼠标 -->> 3主机 -->> 5键盘 -->> 2 6 先创建商品类，代码如下 public class Product { private String pro 阅读全文
posted @ 2019-11-17 22:38 Lucas_zhao 阅读(371) 评论(0) 推荐(0) 编辑
HashMap案例_WordCount
摘要： 给定一个字符串 "a,b,c,d,e,f,g,h,b,b,b,c,x,x,y,x,b"写一个程序将这个字符串中的字母去重，将去重后的字母打印出来。写一个程序统计出每一个字母出现的总次数，并将结果打印如下。 import java.util.HashMap; public class testWord 阅读全文
posted @ 2019-11-17 22:25 Lucas_zhao 阅读(243) 评论(0) 推荐(0) 编辑
java中HashSet和增强for循环的用法
摘要： import java.util.HashSet; import java.util.Iterator; public class HasSetDemo { public static void main(String[] args) { HashSet是一个集合数据类型，一个具体的HashSet中 阅读全文
posted @ 2019-11-17 19:48 Lucas_zhao 阅读(1555) 评论(0) 推荐(0) 编辑
java中HashMap的用法
摘要： HashMap的用法示例: import java.util.HashMap; public class HashMapDemo { public static void main(String[] args) { // 定义HashMap对象map1,key和value的数据类型都是String. 阅读全文
posted @ 2019-11-17 19:28 Lucas_zhao 阅读(2243) 评论(0) 推荐(0) 编辑
2019年11月4日
numpy.unravel_index()函数的用法
摘要： numpy.unravel_index()函数的作用是获取一个/组int类型的索引值在一个多维数组中的位置。 语法： numpy.unravel_index(indices, dims) 举个简单的例子 求一个多维数组的最大元素的索引 A = np.random.randint(1,100,size 阅读全文
posted @ 2019-11-04 15:38 Lucas_zhao 阅读(17825) 评论(0) 推荐(2) 编辑
2019年10月18日
np.argsort()的用法
摘要： 在深度学习Mnist案例中遇到了argsort()函数，查了相关资料，把它的用法整理如下。 numpy.argsort(a, axis=-1, kind=’quicksort’, order=None) 功能: 将矩阵a按照axis排序，并返回排序后的下标参数: a:输入矩阵， axis:需要排序的 阅读全文
posted @ 2019-10-18 11:07 Lucas_zhao 阅读(53379) 评论(0) 推荐(6) 编辑
2019年6月27日
read_csv报错：OSError: Initializing from file failed
摘要： python版本3.6 import pandas as pd df = pd.read_csv(r'C:\Users\ZHAOLAN\Desktop\Python数据集\train pivot.csv',sep= ",") print(df) 报错信息：OSError: Initializing 阅读全文
posted @ 2019-06-27 09:58 Lucas_zhao 阅读(278) 评论(0) 推荐(0) 编辑