摘要：
七大原则是程序员架构之路上躲不开的一道槛，只有掌握了七大原则和二十四设计模式才有能对代码进行高水平的重构，对源码的解读也会更加的轻松! 用抽象构建框架，用实现扩展细节是所有代码设计模式的基础。设计原则的出现是为了提高系统的可维护性和可复用性，提高系统的高内聚和低耦合! 每种设计原则的组合和使用都是在 阅读全文
摘要：
今天主要完成了软件设计实验一中的编程问题 [实验任务二]：单一职责原则 登录模块在实际项目开发中很常见，请按照教材28页利用单一职责原则重构后的类图实现这一模块。 1、新建 java project 2、导入jar包 mysql-connector-java-8.0.22.jar * 此处注意jar 阅读全文
摘要：
今天进行了开学关于hadoop使用的考核 最终考核结果为实现hbase的安装与配置，并使用hbase进行建表，在建表过程中出现了一些问题，总结如下： 1.在进行建表之前要按照顺序打开虚拟机，hdfs,zookeeper集群与habse。 操作如下： 如果没开启hdfs，请在node01运行start 阅读全文
摘要：
一、hadoop入门环境准备 1.教程视频参考：【大数据开发入门】开课吧Hadoop从0到精通详解教程，2021年最新全套_哔哩哔哩_bilibili 2.VMware版本信息：VMware workstation pro 提示：一定一定要按照视频操作来，无脑操作，保证成功，与视频中的文件最好的保持 阅读全文
摘要：
今天上了软件需求与分析的第一堂课 从大三开始，我们学习的方向从之前的基础知识转向了软件开发的思想以及具体细节 在王老师的带领下我们观看了《梦想改造家》 设计师用自己的智慧解决了客户的问题，满足了客户的需求 作为一名软件设计师，理解客户的需求往往也是最重要的一点 今天最大的收获是，只满足客户提出的需求 阅读全文
摘要：
HDFS - 可靠性 HDFS 的可靠性主要有以下几点: 冗余副本策略 机架策略 心跳机制 安全模式 效验和 回收站 元数据保护 快照机制 1.冗余副本策略 可以在 hdfs-site.xml 中设置复制因子指定副本数量 所有数据块都可副本 DataNode 启动时,遍历本地文件系统,产生一份 HD 阅读全文
摘要：
HDFS - 写文件 1.客户端将文件写入本地磁盘的 HDFS Client 文件中 2.当临时文件大小达到一个 block 大小时，HDFS client 通知 NameNode，申请写入文件 3.NameNode 在 HDFS 的文件系统中创建一个文件，并把该 block id 和要写入的 Da 阅读全文
摘要：
MapReduce - 读取数据 通过InputFormat决定读取的数据的类型，然后拆分成一个个InputSplit，每个InputSplit对应一个Map处理，RecordReader读取InputSplit的内容给Map InputFormat 决定读取数据的格式，可以是文件或数据库等 功能 阅读全文
摘要：
Hadoop - HDFS 简介 Hadoop Distributed File System，分布式文件系统 架构 Block数据块; 基本存储单位，一般大小为64M（配置大的块主要是因为：1）减少搜寻时间，一般硬盘传输速率比寻道时间要快，大的块可以减少寻道时间；2）减少管理块的数据开销，每个块都 阅读全文
摘要：
一、今日内容： 今日学习了大数据导论，分别包括以下内容： 1、大数据概念：大数据(big data)，或称巨量资料，指的是所涉及的资料量规模巨大到无法透过目前主流软件工具，在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯 2、大数据特点： 大量 高速 多样性 低价值密度： 阅读全文