摘要:
一、大数据spark 跟着b站的尚硅谷大数据往后学习了7个知识点 视频号:av62992342 内容:学习了行动算子与task执行序列化 课程学习进度:47/126 二、《一线架构师实践指南》阅读 阅读了第七章 Conceptual Architecture总论 阅读全文
摘要:
一、大数据spark 跟着b站的尚硅谷大数据往后学习了10个知识点 视频号:av62992342 内容:学习了k-v算子 课程学习进度:40/126 二、《一线架构师实践指南》阅读 阅读了第六章 概念架构的故事 阅读全文
摘要:
一、大数据spark 跟着b站的尚硅谷大数据往后学习了10个知识点 视频号:av62992342 内容:学习了spark的几个算子,map、flatMap等 课程学习进度:30/126 二、《一线架构师实践指南》阅读 阅读了第五章 确定关键质量与关键功能 阅读全文
摘要:
一、大数据spark spark环境在昨天已经全部搭建成功了 跟着b站的尚硅谷大数据往后学习了6个知识点,视频号:av62992342 学习了关于RDD的一系列知识。 课程学习进度:20/126 二、《一线架构师实践指南》阅读 阅读了第四章 需求结构化与分析约束影响 阅读全文
摘要:
一、大数据spark 昨天将scala搭好后,今天跟着林子雨老师搭建了spark。 http://dblab.xmu.edu.cn/blog/1307-2/ 跟着b站的尚硅谷大数据往后学习了6个知识点,视频号:av62992342 课程学习进度:14/126 二、《一线架构师实践指南》阅读 阅读了第 阅读全文
摘要:
一、大数据spark 跟着csdn的scala教程搭建了spark所用语言scala的环境 https://edu.csdn.net/course/play/20364/292538 跟着b站的尚硅谷大数据学习了8个知识点,视频号:av62992342 初步了解了spark的各方面知识,并且使用其做 阅读全文
摘要:
/*祖国加油*/ 先定一个小计划 2月份假期要完成的有三件事: 1.学习spark 2.制作信息领域热词分析器 3.软件架构知识学习 一、大数据spark 基础实验一又是常见的搭系统环节 跟着林子雨老师搭系统就完事了,下面是链接 http://dblab.xmu.edu.cn/blog/285/ l 阅读全文
摘要:
题目说明: Result文件数据说明: Ip:106.39.41.166,(城市) Date:10/Nov/2016:00:01:02 +0800,(日期) Day:10,(天数) Traffic: 54 ,(流量) Type: video,(类型:视频video或文章article) Id: 87 阅读全文
摘要:
MapReduce采用的是“分而治之”的思想,把对大规模数据集的操作,分发给一个主节点管理下的各个从节点共同完成,然后通过整合各个节点的中间结果,得到最终结果。简单来说,MapReduce就是”任务的分解与结果的汇总“。一、 MapReduce的工作原理在分布式计算中,MapReduce框架负责处理 阅读全文
摘要:
学习大数据在虚拟机中的增删改查 复习数据库相关知识。 阅读全文