摘要:前天上课老师留下课后作业让我们完成王概凯老师的架构漫谈,并写1500的读后感,在前四章中作者主要以架构为中心谈论了架构的来源,架构的作用,以及为什么要使用架构,架构要解决什么问题,老师在课堂上也留了相应的问题让我们思考,对此有以下见解。 我对软件架构的初步认知便是通过软件架构,我们可以提高编写软件的
阅读全文
摘要:Spark是什么 学习一个东西之前总要知道这个东西是什么。 Spark 是一个开源的大数据处理引擎,它提供了一整套开发 API,包括流计算和机器学习。它支持批处理和流处理。 Spark 的一个显著特点是它能够在内存中进行迭代计算,从而加快数据处理速度。尽管 Spark 是用 Scala 开发的,但它
阅读全文
摘要:commons-codec-1.11.jar下载及Maven、Gradle引入代码,pom文件及包内class -时代Java (nowjava.com) commons-codec-1.11.jar下载及Maven、Gradle引入代码,pom文件及包内class -时代Java (nowjava
阅读全文
摘要:根据下面时间安排,以及卷main分支情况来看,数据结构这一张不论是在哪里都占有一席之地,所以打算好好回复一下数据结构的知识,将其中的堆栈,以及各种排序算法重新复习一遍,
阅读全文
摘要:这道题目主要考的是单缓冲区,顺序处理,磁盘不断旋转,数据处理的过程磁盘仍在旋转,导致下一次的磁盘头已经顺位到达下一个数据块末尾,树边说一下读取数据也需要cpu的操控,所以必须一直转下去直到再次回到顺位起点才能开始处理数据,即除了r0外其他都需要3乘10➕3➕3的时间一共10块即360再加上r0的6毫
阅读全文
摘要:今天进行了服务外包杯相关题目的了解,主要是进行了相关知识的查询,对于知识图谱进行了深度上的了解
阅读全文
摘要:Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapReduce的通用并行框架,Spark,拥有Hadoop MapReduce所具有的优点;但不同于MapRe
阅读全文
摘要:今天先是看了几个关于spark的实验主要是参照厦门大学林子雨老师的相关实验报告,在校内的时候上课时候做过相关实验主要是运用虚拟机 我用的安装虚拟机的教程是黑马的,在前面的博客中有记载
阅读全文
摘要:寒假开始老师布置的任务是熟悉spark的应用,以及完成实验练习,还有服务外包杯组队
阅读全文