摘要: 阅读全文
posted @ 2019-08-14 10:38 天马流欣 阅读(407) 评论(0) 推荐(0) 编辑
摘要: Exception in thread "main" java.lang.SecurityException: Invalid signature file digest for Manifest main attributes 解决办法: 删除对应的jar 包下的文件 zip -d spark_s 阅读全文
posted @ 2019-08-09 15:51 天马流欣 阅读(176) 评论(0) 推荐(0) 编辑
摘要: 前言 今天碰到一个需求,需要在项目中,引入一个其他项目的SDK包,这个包大概有几十个类文件,如果全部复制进入项目,需要修改的工作量很大,所以考虑打成jar包并引入。 介绍 需要打包的项目,以及需要引入的项目均为maven项目 工具使用Idea 打包jar 首先,如果需要打包成jar,必须有一个Mai 阅读全文
posted @ 2019-08-09 15:49 天马流欣 阅读(265) 评论(0) 推荐(0) 编辑
摘要: 阅读全文
posted @ 2019-06-12 14:15 天马流欣 阅读(99) 评论(0) 推荐(0) 编辑
摘要: Python之NumPy(axis=0 与axis=1)区分 python中的axis究竟是如何定义的呢?他们究竟代表是DataFrame的行还是列?考虑以下代码: >>>df = pd.DataFrame([[1, 1, 1, 1], [2, 2, 2, 2], [3, 3, 3, 3]], \ 阅读全文
posted @ 2019-05-13 15:51 天马流欣 阅读(549) 评论(0) 推荐(0) 编辑
摘要: 如何通俗易懂地解释「协方差」与「相关系数」的概念?(转) 如何通俗易懂地解释「协方差」与「相关系数」的概念?(转) 可以通俗的理解为:两个变量在变化过程中是同方向变化?还是反方向变化?同向或反向程度如何? 你变大,同时我也变大,说明两个变量是同向变化的,这时协方差就是正的。 你变大,同时我变小,说明 阅读全文
posted @ 2019-05-13 15:07 天马流欣 阅读(574) 评论(0) 推荐(0) 编辑
摘要: Spark笔记-treeReduce、reduce、reduceByKey 参考资料: http://stackoverflow.com/questions/32281417/understadning-treereduce-in-spark http://stackoverflow.com/que 阅读全文
posted @ 2019-03-14 21:48 天马流欣 阅读(831) 评论(0) 推荐(0) 编辑
摘要: 为了对表进行合理的管理以及提高查询效率,Hive可以将表组织成“分区”。一个分区实际上就是表下的一个目录,一个表可以在多个维度上进行分区,分区之间的关系就是目录树的关系。 1、创建分区表通过PARTITIONED BY子句指定,分区的顺序决定了谁是父目录,谁是子目录。创建有一个分区的分区表:CREA 阅读全文
posted @ 2019-03-14 17:21 天马流欣 阅读(2263) 评论(0) 推荐(0) 编辑
摘要: 今天读《计算机组成-结构化方法》后,对这个问题有了新的理解。 将负数用补码表示,实际上是实现了一种从[-128, 127]到[0, 255]的映射。如下所示: + + | 255 -1 11111111 | | 254 -2 11111110 | | 253 -3 11111101 | | 252 阅读全文
posted @ 2019-01-14 15:24 天马流欣 阅读(318) 评论(0) 推荐(1) 编辑
摘要: 一、位运算 (1)按 位 与 & 如果两个相应的二进制形式的对应的位数都为1,则结果为1,记为同1为1,否则为0。首先我们看一下对正数的运算 分别看一下正数和负数的具体运算步骤 正数直接取二进制运算,负数取反加一得补码再运算,得到的结果符号位为0,不需要做任何操 作直接给出结果,后面会讲到如果结果为 阅读全文
posted @ 2019-01-14 11:55 天马流欣 阅读(1309) 评论(0) 推荐(0) 编辑