摘要：
Spark基础学习精髓 1 Spark与大数据 1.1 大数据基础 1.1.1 大数据特点 存储空间大 数据量大 计算量大 1.1.2 大数据开发通用步骤及其对应的技术 大数据采集->大数据预处理->大数据存储->大数据处理->大数据可视化 (1)大数据采集技术 分布式架构、多种采集技术混合使用 w 阅读全文
摘要：
一、绪论 1.存储的本质 信息跨越空间的传递——通讯 信息跨越时间的传递——存储 通讯：利用具有跨越空间特性的物理现象 声音、光、电 存储：利用具有时间稳态的物理现象 物理稳态、磁稳态、半导体稳态 什么是存储？ 存储： ·它是数据临时或长期驻留的物理媒介；·它是保证数据完整安全存放的方式或行为。 计 阅读全文
摘要：
近期，为提升自己的工程能力，在休息时常通过刷题来回顾一下基础性知识。 于是选择了牛客网上的mysql知识题库练手，过程中，主要遇到了几个比较有意思的题，记录下来，方便回顾。 题1：SQL29 计算用户的平均次日留存率 描述 题目：现在运营想要查看用户在某天刷题后第二天还会再来刷题的平均概率。请你取出 阅读全文
摘要：
1 用sbt构建scala项目 参考网址： https://github.com/scalanlp/breeze/wiki/Installation https://docs.scala-lang.org/getting-started/sbt-track/getting-started-with- 阅读全文
摘要：
磁盘与阵列技术 2.1 磁盘HDD(Hard Disk Drive) 1.磁盘依旧占外部存储市场的主流 2.HDD新技术 -HAMR技术（热辅助磁记录）：提高单盘存储容量（20TB起） -MACH.2（双驱动臂）：提高读写速度（480MB/s） 3.HDD大容量硬盘未衰反兴 4.磁盘里面的结构 磁盘 阅读全文
摘要：
一、OpenMP概述 1.OpenMP应用编程接口API是在共享存储体系结构上的一个编程模型 2.包含 编译制导（compiler directive）、运行库例程（runtime library）、环境变量（environment variables） 3.支持增量并行化 4.结合了两种并行编程的 阅读全文
摘要：
大数据存储技术_背景 信息量的剧增 全世界权威IT咨询公司研究报告预测： 全世界数据量从2008年的0.8ZB增长到2020年的35ZB，44倍，年增长率超过40%. 形象比喻：0.8ZB 相当于一堆DVD堆叠起来够地球到月球的一个来回；35ZB 一堆DVD堆叠起来是地球到火星距离的一半. 扎克伯格 阅读全文
摘要：
找出单位内所有电脑手机 通常情况下，ping只能ping一个IP地址。一个网络值班只有255台电脑，除非是大的网络断，把子网掩码改了，可以扩充更多电脑。如： 如果我们要一次性检查内网所有机器，则可以输入以下命令： for /l %d in (1,1,255) do ping 192.168.1.%d 阅读全文
摘要：
# Markdown 使用说明 Markdown 是一种**轻量级标记语言** 使用规则： 1. 标题 2. 列表 3. 引用 4. 图片与链接 5. 粗体与斜体 6.表格 7. 代码框 8. 分割线 阅读全文