摘要：
/boot: 系统启动相关的文件，如内核、initrd，以及grub(bootloader)/dev: 设备文件 块设备：随机访问，数据块 字符设备：线性访问，按字符为单位 设备号：主设备号（major）和次设备号（minor）/etc：配置文件/home：用户的家目录，每一个用户的家目录通常默认为 阅读全文
摘要：
ls命令详解 -l：长格式 文件类型： -：普通文件 (f) d: 目录文件 b: 块设备文件 (block) c: 字符设备文件 (character) l: 符号链接文件(symbolic link file) p: 命令管道文件(pipe) s: 套接字文件(socket) 文件权限：9位，每 阅读全文
摘要：
论文创新点： 提出了一种能处理稀疏数据的提升生树算法 描述了一种加权分位数方法的大概流程，能够用于处理近似树学习中的实例权重。 并行和分布式设计让这个算法有非常快的训练速度。 XGBoost能够在外存上进行计算，使其能处理更大的数据量。 提升树模型小结 提升树模型有多颗树组成，每颗树都把一个样本映射 阅读全文
摘要：
启动hbase：start-hbase.sh 停止hbase：stop-hbase.sh 进入hbase命令行端口：hbase shell 查看帮助信息：help 查看服务器状态：status 查看版本信息：version 查看当前用户：whoami 查看表相关命令的帮助信息：table_help 阅读全文
摘要：
背景 • 引入原因： – 对存在HDFS上的文件或HBase中的表进行查询时，是要手工写一堆MapReduce代码 – 对于统计任务，只能由动MapReduce的程序员才能搞定 – 耗时耗力，更多精力没有有效的释放出来 • Hive基于一个统一的查询分析层，通过SQL语句的方式对HDFS上的数据进行 阅读全文
摘要：
Hbase介绍 • HBase是一个开源的非关系型分布式数据库（NoSQL），它参考了谷歌的BigTable建模，实现 的编程语言为 Java。 • 是Apache软件基金会的Hadoop项目的一部分，运行于HDFS文件系统之上，因此可以容错地存 储海量稀疏的数据。 • 特性： – 高可靠 – 高并 阅读全文
摘要：
启动zk服务：./zkServer.sh start （所有节点都要启动） 查看zk的运行状态：./zkServer.sh status 客户端链接zk：./zkCli.sh （要先启动zookeeper服务） 查看客户端帮助命令：help 查看节点目录：ls 获取节点数据和更新信息：get 获得节 阅读全文
摘要：
最基本的海量数据分流思想 • 传统Hash，最基本的划分方法 – 如何将大数据、流量均分到N台服务器 – 找到合理的key，hash（key）尽量分布均匀 – hash(key)mod N == 0 分到 第0台， – hash(key)mod N == i 分到 第i台 – hash(key)mo 阅读全文
摘要：
1、cookie不属于http协议范围，由于http协议无法保持状态，但实际情况，我们却又需要“保持状态”，因此cookie就是在这样一个场景下诞生。 cookie的工作原理是：由服务器产生内容，浏览器收到请求后保存在本地；当浏览器再次访问时，浏览器会自动带上cookie，这样服务器就能通过cook 阅读全文
摘要：
思路 维护一个 v 数组，v [ i ]表示长度为i+1的LIS结尾元素的最小值 阅读全文