摘要: Spark Programming Guide Link:http://spark.apache.org/docs/2.2.0/rdd-programming-guide.html 每个Spark Application包含一个driver程序(运行main方法)以及在集群中执行不同的并行操作。 S 阅读全文
posted @ 2018-04-03 14:07 sodawoods 阅读(256) 评论(0) 推荐(0) 编辑
摘要: Job Scheduling Link:http://spark.apache.org/docs/2.2.0/job-scheduling.html 概况: (1)集群中多个应用的调度主要考虑的是不同应用能够使用的集群资源的情况,即CPU以及内存资源,包括静态(Standalone,Mesos、Ya 阅读全文
posted @ 2018-04-03 13:42 sodawoods 阅读(238) 评论(0) 推荐(0) 编辑
摘要: Cluster Mode Overview Link:http://spark.apache.org/docs/2.2.0/cluster-overview.html Spark应用(Applications)作为独立的进程运行在集群中。 Driver程序中持有SparkContext对象,集群中运 阅读全文
posted @ 2018-04-03 13:34 sodawoods 阅读(213) 评论(0) 推荐(0) 编辑
摘要: 由于需要分析算法的最好时间复杂度和最坏时间复杂度,因此这篇文章中写的排序都是从小到大的升序排序。 带排序的数组为arr,arr的长度为N。时间复杂度使用TC表示,额外空间复杂度使用SC表示。 好多代码都用到了交换arr[i]和arr[j]的地方,这里先给出代码。 (1)插入排序 1.1直接插入排序 阅读全文
posted @ 2018-03-31 10:45 sodawoods 阅读(232) 评论(0) 推荐(0) 编辑
摘要: 1、一个类在设计之初就要实现对该类对象的排序功能,那么这个类要实现Comparable接口,实现public int compareTo(T t)方法。如代码中的Student类。对于实现Comparable接口的类, 调用java.util.Arrays.sort(Object[] a)对包含对象 阅读全文
posted @ 2017-02-18 16:36 sodawoods 阅读(683) 评论(0) 推荐(0) 编辑
摘要: 一 JAVA语言中主要通过流来完成IO操作。流:计算机的输入输出之间流动的数据序列,也是类的对象。java中的流方式就像是建立在数据交换源和目的之间的一条通信路径。数据源:计算机中的数据源是指可以提供数据的地方,包括键盘,磁盘文件,网络接口等。输入流:从程序外部传向程序的流。输入流只能从中读数据。输... 阅读全文
posted @ 2015-04-20 15:08 sodawoods 阅读(5734) 评论(0) 推荐(0) 编辑
摘要: 一 this关键字this关键字可以出现在构造方法和实例方法中,不能出现在静态方法中,这是因为静态方法可以用类名来调用,这时可能还没有任何对象诞生。this主要有两种用法:1 用在构造方法中,调用本类的其他构造方法。 格式为 this([实参列表]); 通过this调用本类的其他构造方法时,该语句... 阅读全文
posted @ 2015-04-19 15:29 sodawoods 阅读(1548) 评论(0) 推荐(0) 编辑
摘要: 一 类的修饰符java中的文件结构由大到小为:一个工程,一个工程下可以有许多包,每个包中可以有许多类。类的修饰符分为 访问权限修饰符 和 非访问权限修饰符(1)访问权限修饰符:1 public 公共类修饰符,public修饰的类可以被同一个包中的类访问,也可以被其他包中的... 阅读全文
posted @ 2015-04-19 10:41 sodawoods 阅读(5365) 评论(0) 推荐(0) 编辑
摘要: 一 抽象类抽象类就是不能被实例化的类,即不可以用new运算符创建本类的对象。在实际应用中,抽象类应该具有子类,且其子类一般不为抽象类。java中使用抽象类的原因有如下四点:1.抽象类是较高层次的概括,其他的类可以继承它的抽象化特征;2.抽象类包括它的所有子类共享的公共行为和公共属性,即抽象类中定义一... 阅读全文
posted @ 2015-04-19 00:05 sodawoods 阅读(614) 评论(0) 推荐(0) 编辑
摘要: (—)通过mysql workbench 创建一个数据库,在这里命名为company,然后建一个tb_employee表 (二)以下是java代码对表tb_employee的操作 1 创建一个Employee类,包括员工的一些信息,如 id name age sex 2创建DatabaseConne 阅读全文
posted @ 2015-04-10 22:40 sodawoods 阅读(39375) 评论(2) 推荐(3) 编辑