摘要: Spark 版本:1.3 调用shell, spark-submit.sh args[] 首先是进入 org.apache.spark.deploy.SparkSubmit 类中调用他的 main() 方法 1.1 val appArgs = new SparkSubmitArguments(arg 阅读全文
posted @ 2018-11-18 13:20 一根咸鱼干 阅读(372) 评论(0) 推荐(0) 编辑
摘要: 什么是Hadoop HDFS? Hadoop 分布式文件系统是世界上最可靠的文件系统。HDFS可以再大量硬件组成的集群中存储大文件。 它的设计原则是趋向于存储少量的大文件,而不是存储大量的小文件。 即使在硬件发生故障的时候,HDFS也能体现出它对数据存储的可靠性。它支持高吞吐量的平行访问方式。 HD 阅读全文
posted @ 2018-09-04 17:09 一根咸鱼干 阅读(260) 评论(0) 推荐(0) 编辑
摘要: /* * 中文乱码出现的情况研究 * 注意点:乱码解决的办法是再编码再解码 * 但是如果是编码出错了,无法解决.如果是解码出错了,可以利用再编码再解码 * * * 编码 解码 结果 * GBK utf8 不可以(GBK2个字节,utf83个字节) * GBK ISO8859-1 可以 * utf8 阅读全文
posted @ 2018-08-26 19:22 一根咸鱼干 阅读(233) 评论(0) 推荐(0) 编辑
摘要: Java多线程交互, 流, 字节流 字符流 printStream printWriter 缓存Buffered流 标准输入输出流 流的转换 阅读全文
posted @ 2018-08-20 20:39 一根咸鱼干 阅读(277) 评论(0) 推荐(0) 编辑
摘要: 异常, 迭代器, 包装类, StringBuffer(基本使用), 容器Collection, TreeSet容器中排序, 阅读全文
posted @ 2018-08-10 09:14 一根咸鱼干 阅读(270) 评论(0) 推荐(0) 编辑
摘要: class HelloA { public HelloA() { System.out.println("HelloA"); } { System.out.println("I'm A class"); } static { System.out.println("static A"); } } public class HelloB extend... 阅读全文
posted @ 2018-08-09 21:35 一根咸鱼干 阅读(246) 评论(0) 推荐(0) 编辑
摘要: 循环结构中的多层嵌套跳出 数组 * 一维数组里边存的是值(直接数据) 二维数组里边存的是一维数组的地址 * 二维数组和一维数组一样都是数据类型 二维数组类型的构成: 数据类型 + [] + [] 创建格式 type [][] name = new * type[count][count_1]; co 阅读全文
posted @ 2018-08-06 13:05 一根咸鱼干 阅读(362) 评论(0) 推荐(0) 编辑
摘要: 对于第四题 一共三个数字 X Y Z 相加得零 他们重复的情况下 : 计算 X² + Y² + Z² ( 1 2 -3 ->> 1 + 4 + 9 = 14), i 值 : 两个负数则为 1 一个负数则为 负1 (1 2 -3 ->> 14 * i ->> -14 , -1 -2 3 ->> 14 阅读全文
posted @ 2018-08-06 10:10 一根咸鱼干 阅读(163) 评论(0) 推荐(0) 编辑
摘要: 1. 最大子序列和问题 给定(可能有负数)整数a(1)、a(2)、……a(n),求 a(1)+a(2)+……+a(j)的最大值。 也就是:在一系列整数中,找出连续的若干个整数,这若干个整数之和最大。有参考(https://www.cnblogs.com/hapjin/p/5404705.html) 阅读全文
posted @ 2018-08-06 09:49 一根咸鱼干 阅读(167) 评论(0) 推荐(0) 编辑
摘要: private final char value[]; 来存储内容, 其既可以当作一个基本类型来使用也可以当作一个类来使用;String内存分析; 阅读全文
posted @ 2018-08-04 11:43 一根咸鱼干 阅读(346) 评论(0) 推荐(0) 编辑