摘要:
一、今日学习内容 阅读笔记 这周读了《人月神话》,作者阐述的主要观点是在软件开发项目上项目进度和增加人员这两个概念是不能互换。在之前一直认为,人多做的事情就多,就可以解决很多问题,这个观点在一些方面可能成立,但是在开发项目方面好像并不是。 一、美国20年前软件项目所面临的问题,在我们现在依然如此,糟 阅读全文
摘要:
一、今日学习内容 1 开闭原则:一个软件实体如类,模块和函数应该对扩展开放,修改关闭! 背景:一般情况下,在系统相对稳定的时候,一个Dao类都是通过实现一个抽象接口来完成一个Dao类,但是当我们对于某个Dao类的实现并不满足。我们需要在原来的Dao基础上新增方法或者模块。对于专属专用的接口自然比较容 阅读全文
摘要:
一、今日学习内容 一、hadoop入门环境准备 1.教程视频参考:【大数据开发入门】开课吧Hadoop从0到精通详解教程,2021年最新全套_哔哩哔哩_bilibili 2.相关资料: 3.VMware版本信息:VMware workstation pro提示:一定一定要按照视频操作来,无脑操作,保 阅读全文
摘要:
一、今日学习内容 实现hbase的安装与配置,并使用hbase进行建表,总结如下: 1.在进行建表之前要按照顺序打开虚拟机,hdfs,zookeeper集群与habse。 操作如下: 如果没开启hdfs,请在node01运行start-dfs.sh命令 如果没开启zookeeper,请在3个节点分别 阅读全文
摘要:
一、今日学习内容 阅读笔记 这周开始阅读了《人月神话》,阅读这本书的第一感受就是感觉这本书不像是一种和学习相关的书,更像是用很多形象的比喻,阐述项目管理当中的一些问题,让读者能够很轻松,明白的去阅读。 很多人认为,当任务在规定期限内还完成不了的时候,适当的加一些人员进去,可以加快任务的进度,从而能够 阅读全文
摘要:
一、今日学习内容 今天进行Hadoop集群的安装配置,做好环境准备工作,并学习了hbase的安装与配置。 二、遇到的问题 对于要安装的内容不熟悉 阅读全文
摘要:
一、今日学习内容 今天是这个学习第一次软件需求案例分析的课,在课上,老师让我们看了《梦想改造家》这个节目,这个节目是一名设计师对房屋进行改造,让房屋在有限的条件内变得更温馨、更舒适。 根据观看的视频内容,回答下列问题: 1、 视频中的建筑设计师的名称叫什么?(1分) 2、 你认为客户遇到的问题是什么 阅读全文
摘要:
一、今日学习内容 HDFS - 可靠性 HDFS 的可靠性主要有以下几点: 冗余副本策略 机架策略 心跳机制 安全模式 效验和 回收站 元数据保护 快照机制 1.冗余副本策略 可以在 hdfs-site.xml 中设置复制因子指定副本数量 所有数据块都可副本 DataNode 启动时,遍历本地文件系 阅读全文
摘要:
MapReduce - 读取数据 通过InputFormat决定读取的数据的类型,然后拆分成一个个InputSplit,每个InputSplit对应一个Map处理,RecordReader读取InputSplit的内容给Map InputFormat 决定读取数据的格式,可以是文件或数据库等 功能 阅读全文
摘要:
一、今日学习内容 今日学习了大数据导论,分别包括以下内容: 1、大数据概念:大数据(big data),或称巨量资料,指的是所涉及的资料量规模巨大到无法透过目前主流软件工具,在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯 2、大数据特点: 大量 高速 多样性 低价值密度 阅读全文