摘要：
1、本地向量local vector 稠密向量densevector和稀疏向量sparsevector eg：向量(1.0, 0.0, 3.0) 稠密向量表示形式：[1.0,0.0,3.0] 稀疏向量表示形式：(3, [0,2], [1.0, 3.0]) 2、标注点labeled point，是一种 阅读全文
摘要：
1、线程的5个状态 创建、就绪、执行、阻塞、结束 2、常用函数说明 sleep()：线程睡眠 join()：等待该线程结束，主线程再结束 yield()：暂停当前线程，当前线程进入可执行状态，开始其他线程 setPriority():更改线程的优先级 Obj.wait()，与Obj.notify() 阅读全文
摘要：
1、redis简介 redis：remote dictionary server，通常被称为数据结构服务器，value可以是string、map、list、sets、sorted sets。 redis支持数据的持久化，可以将内存中的数据保存在磁盘中，重启的时候再加载到内存中。 2、redis优势 阅读全文
摘要：
java反射机制： 1、背景 正常情况下，在编译过程中，都会检查对象的class文件，但是有时在编译过程中，class文件是不可获取的，无法进行编译，如在远程方法调用时（特别分布式系统），这是就需要在运行时，加载class文件，获取对象的方法等等。 2、输出结果 阅读全文
只有注册用户登录后才能阅读该文。 阅读全文
摘要：
公司中一般采用spark on yarn 模式，下面主要介绍spark on yarn的安装与简单程序运行。 1、spark on yarn两种运行模式 yarn-cluster：用于生产环境。Driver和AM运行在一起，client单独。 yarn-client：能立即看到输出结果。Driver 阅读全文