摘要： 今天学习了habse的基本概念： HBase是一个分布式的、面向列的开源数据库，该技术来源于 Fay Chang 所撰写的Google论文“Bigtable：一个结构化数据的分布式存储系统”。就像Bigtable利用了Google文件系统（File System）所提供的分布式数据存储一样，HBas 阅读全文

摘要： 今天弄虚拟机的时候发现打开Hadoop集群的那个sbin/start-dfs.sh命令不好使了，报了一堆错，是这样的 Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password) 咋打也打不开，网页搜索http://hadoo 阅读全文

摘要： 今天学习了hdfs的权限： 下面我来介绍一下hdfs的权限： 概述 Hadoop分布式文件系统实现了一个和POSIX系统类似的文件和目录的权限模型。每个文件和目录有一个所有者（owner）和一个组（group）。文件或目录对其所有者、同组的其他用户以及所有其他用户分别有着不同的权限。对文件而言，当读 阅读全文

摘要： 这段时间阅读了掌握需求过程的五六章，下面是总结： 5.命名标准和定义 [定义项目中使用到的所有术语，包括同义词。这里的内容就是一个字典，包括在需求规格说明书中使用的所有名称的含义。这个字典应该使用你的组织或行业使用的标准名称。这些名称也应该反映出在工作领域中当前使用的术语。该字典包括项目中用到的所有 阅读全文

摘要： 这段时间阅读了掌握需求过程的三四章 下面是总结： 3.产品的用户 3.1 产品的用户 [产品的潜在用户或操作员的列表。针对每种类型的用户，提供以下信息：] 1） 用户分类 2） 用户工作的任务； 3） 主要相关的经验； 4） 技术经验； 5） 其他用户特征：包括身体、智力、工作态度、对技术的态度、教 阅读全文

摘要： 今天学习了hdfs的使用，下面介绍我学习的如何使用hdfs: 目的 本文档的目标是为Hadoop分布式文件系统（HDFS）的用户提供一个学习的起点，这里的HDFS既可以作为Hadoop集群的一部分，也可以作为一个独立的分布式文件系统。虽然HDFS在很多环境下被设计成是可正确工作的，但是了解HDFS的 阅读全文

摘要： 这段时间阅读了掌握需求过程这本书的前两章。 下面是对前两张的总结： 1.产品的目标 1.1 该项目工作的用户问题或背景 [对引发开发任务的工作和情况的描述。同时也应描述用户希望用将要交付的软件来完成的工作。] [该节内容为该项目提供了合法的理由，你应该考虑用户的问题是否严重，是否应该解决和为什么应该 阅读全文

摘要： 今天学习了需求工程的第五六章，第五章是需求验证，第六章是需求管理。 5 需求验证 需求验证的目的是检验是否能够反映用户的意愿,需要对需求文档中定义的需求执行多种检查,评审团队应该检查需求的有效性,一致性和作为一个整体的完备性.包括系统定义的目标是否与用户的要求一致,系统需求分析阶段提供的文档资料是否 阅读全文

摘要： 今天安装配置了一下hadoop, 在网上找的教程 尚硅谷的地址：https://www.bilibili.com/video/BV1Qp4y1n7EN?p=46 从18开始看到31就能安装好hadoop 我总结了一下步骤： 安装VMware; 安装虚拟机 在网上找Hadoop包，jdk包 卸载虚拟机 阅读全文

摘要： HDFS是一种文件系统，专为MapReduce这类框架下的大规模分布式数据处理而设计。你可以把一个大数据集（比如说100TB）在HDFS中存储为单个文件，而大多数其他的文件系统无力实现这一点。HDFS使你不必考虑这些细节，让你感觉就像在处理单个文件一样。 因为HDFS并不是一个天生的Unix文件系统 阅读全文