摘要: "查看hdfs各目录分别占用多少空间" "HDFS常用命令" 阅读全文
posted @ 2017-12-21 09:22 开水白菜 阅读(2810) 评论(0) 推荐(0) 编辑
摘要: 转载自: "java_时间戳与Date_相互转化的实现代码" 阅读全文
posted @ 2017-12-21 09:21 开水白菜 阅读(134) 评论(0) 推荐(0) 编辑
摘要: 参考: " SparkML之推荐算法(一)ALS" 有个比较详细的讲解,包含blocks使用。 "Spark ALS源码总结" 阅读全文
posted @ 2017-12-21 09:18 开水白菜 阅读(1877) 评论(0) 推荐(0) 编辑
摘要: 栈溢出原因:由于ASL的迭代次数过多,DAG过深,导致RDD的lineage,栈溢出。 现有解决:1.迭代次数减少。 2.利用checkpoint? 参考: 1. " 记一次spark mllib stackoverflow踩坑" 2. "一个 KCore 算法引发的 StackOverflow 奇 阅读全文
posted @ 2017-12-04 10:33 开水白菜 阅读(943) 评论(0) 推荐(0) 编辑
摘要: 1.介绍 Hbase是一个NoSQL数据库,可存储大量非关系型数据。 phoenix+Hbase + HBASE+PHOENIX性能优化注解 http://blog.csdn.net/lingzhiwangcn/article/details/50855885 + 深入分析HBase Phoenix 阅读全文
posted @ 2017-11-03 15:52 开水白菜 阅读(97) 评论(0) 推荐(0) 编辑
摘要: 文档 <http://site.clairvoyantsoft.com/migrate-cloudera-scm-database-from-postgresql-to-mysql/> http://node0:7180/api/v14/cm/deployment 正确网址。 #####1.停止服务 阅读全文
posted @ 2017-10-12 09:38 开水白菜 阅读(492) 评论(0) 推荐(0) 编辑
摘要: JVM是java虚拟机(virtual machine)的简称,JVM使用软件模拟java字节码的指令集。 阅读全文
posted @ 2017-09-28 10:13 开水白菜 阅读(87) 评论(0) 推荐(0) 编辑
摘要: 转载(http://zengzhaozheng.blog.51cto.com/8219051/1404108) 一、概述 本文将讲述Bit-Map算法的相关原理,Bit-Map算法的一些利用场景,例如BitMap解决海量数据寻找重复、判断个别元素是否在海量数据当中等问题.最后说说BitMap的特点已 阅读全文
posted @ 2017-09-27 16:34 开水白菜 阅读(218) 评论(0) 推荐(0) 编辑
摘要: 有一对兔子,从出生后第3个月起每个月都生一对兔子,小兔子长到第三个月后每个月又生一对兔子,兔子的寿命都是10个月,问每个月的兔子总数为多少?第二十个月有多少兔子?? 斐波那契数列,即1,1,2,3,5,8.... 对兔子 a[n]=a[n-1]+a[n-2] 即第n个月的兔子数是前两个月的和 由于寿 阅读全文
posted @ 2017-09-25 22:05 开水白菜 阅读(499) 评论(0) 推荐(0) 编辑
摘要: http://www.itsource.com.cn/?fromuser=AllenBric 阅读全文
posted @ 2017-09-25 12:54 开水白菜 阅读(367) 评论(0) 推荐(0) 编辑