摘要:
tensorflow 阅读全文
摘要:
读了《大型网站技术架构:核心原理与案例分析》其中关于易用性和整体网站的架构等。我明白了: 我们更多的是在研究其中的大型网站核心构架要素中的易用性,何为易用性,易用性指的是可用性的一个重要方面,指的是产品对用户来说意味着易于学习和使用、减轻记忆负担、使用的满意程度等。 产品易用性好,很可能是因为 产品 阅读全文
摘要:
架构所存在就是为了将整体切分为个体所完成的任务,在由人来指挥进行到整体的转变,而架构所能解决的也都是关于人的问题,也只有人的相关复杂问题才需要架构的设计。而切分又是架构中重要的一环,当一个人离开了社会的这种切分,而想要独自一人完成整体的,他毫无疑问是会被社会所淘汰的。切分本质上还是时间上的负载。这个 阅读全文
摘要:
1.1 MapReduce是什么 Hadoop MapReduce是一个软件框架,基于该框架能够容易地编写应用程序,这些应用程序能够运行在由上千个商用机器组成的大集群上,并以一种可靠的,具有容错能力的方式并行地处理上TB级别的海量数据集。这个定义里面有着这些关键词, 一是软件框架,二是并行处理,三是 阅读全文
摘要:
下一周学MapReduce程序在古老的 Hadoop1.0 中,MapReduce 的 JobTracker 负责了太多的工作,包括资源调度,管理众多的 TaskTracker 等工作。这自然是不合理的,于是 Hadoop 在 1.0 到 2.0 的升级过程中,便将 JobTracker 的资源调度 阅读全文
摘要:
下一周学习YarnHDFS简介 HDFS(Hadoop Distribute File System, Hadoop分布式文件系统),是Hadoop核心组成,是分布式存储服务。 分布式文件存储系统横跨多台计算机,在大数据时代有着广泛的应用前景。它们为存储和处理超大规模数据提供所需的扩展能力。HDFS 阅读全文
摘要:
下周接着学习hadoop一、 大数据简介 1. 大数据的定义 ⼤数据是指⽆法在⼀定时间范围内⽤常规软件⼯具进⾏捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策⼒、洞察发现⼒和流程优化能⼒的海量、⾼增⻓率和多样化的信息资产。 大量采集、存储和计算的数据量都⾮常⼤。大数据领域数据量基本上以 阅读全文
摘要:
本周学了Linux Shell 脚本下周学习hadoop Shell是一种脚本语言,那么,就必须有解释器来执行这些脚本,常见的脚本解释器有: bash:是Linux标准默认的shell。bash由Brian Fox和Chet Ramey共同完成,是BourneAgain Shell的缩写,内部命令一 阅读全文
摘要:
本周主要是矩阵计算的相关任务 一下是 源码 // This file is part of Eigen, a lightweight C++ template library // for linear algebra. // // Copyright (C) 2008 Gael Guennebau 阅读全文
摘要:
任务描述。 实现KMP模式匹配算法、由遍历序列恢复二叉树、Kruskal算法、关键路径算法、二叉排序树 二、概要设计 1、抽象数据类型 抽象数据类型(Abstract Data Type,ADT)是将数据对象、数据对象之间的关系和数据对象的基本操作封装在一起的一种表达方式,它和工程中的应用是一致的。 阅读全文