20210602---为了养老，全力以赴，珍惜每一秒钟。决心不够大，不够担心未来，现在虽然挣得少，但是有吃有喝，满足了。

分析一下自己是怎么不学习的： 学习--》吃饭，看个视频吧--》视频很好看，再多看会儿/吃多了，我要躺着休息会---》视频真好看/床真舒服/我太累了--》明天学也一样，今天先放松放松，毕竟工作太累了。坐一天腰好累。---》玩玩玩--》累了学不了了，明天早起学吧，再玩会手机--》早上：起晚了，又迟到了---》工作：好困，晚上没睡好

 

总结：

• 首先是习惯性的放松，在工作中我们能做到紧张，回家或者自习都会习惯性放松，处于放松状态意志力薄弱，容易被学习外的事物吸引。
• 其次是找一些看起来很合理的理由，说服大脑。大脑也是喜欢享受，厌倦思考，双方一拍即合。
• 最后是拖延，总是认为还有很多时间，只浪费一小时或者一天，后面的自己会非常努力，应该及时行乐，这又跟大脑一拍即合。

 

我不再讨厌学习，也不再浮躁了，因为真的老了，精力明显不足了，我必须为我衰老的每一天做好准备。

为什么我再也找不会分秒必争的感觉了，只是因为热或者一点点不舒服，你就不学习了？

游戏 电视剧都毫无意义，都不如休息好，都不如充实自己好，人再陪着你 你自己没有爱好，也会很孤独。

要有一颗大心脏，你慌个啥，现在努力生活一定会好起来的，不要太急功近利，就保持这个好状态。三个月必然找到工作。

必须要有钱，必须要努力！！老说有钱就麻木不仁，我又有钱又有感情不好吗。没有钱能做成啥？亲人死了你都救不了

 

一年时间珍惜每分每秒，足够逆袭了

投入你的时间+端正的态度

必然就会收获成功

你不要怕你的时间错过了玩 电视剧啥的，你知道你闯过这一关，等你的是一个全新的美丽世界么。那上面的花花世界才真的值得你去玩。

现在你所接触的一切，没有什么是不可以放弃的，为了追求人生最好的享受一切都值得。

每一分钟不管你身处何地，和谁在一起，你都可以学习，谁也阻止不了你。

人生切记不要把时间浪费在迷茫和恐惧上，要让行动稳定自己的心，给自己安全感。

不要吃和撸太多这是学习的硬性条件。概括就是说，不用啥都说的那么详细。

 

 

 

 

 

FSImage和Edit

简单了解下他们的内容，FSImage里面存的都是元数据，Editlog里面存的就是一条一条修改记录。

 

集群安全模式

第1种情况是，NameNode每次启动时，对客户端来说是只读的，将FSImage载入内存后，然后监听DataNode，等DataNode更新块列表信息给NN，当满足最小副本数量要求，即99.9%的块副本数够了，自动退出安全模式。

第2种情况是，块丢了，可能得把数据删除后才行。

 

知道了怎么进hadoop/../data目录去看元数据（fsimage和editlog）和真实block，其中元数据是需要通过一个vio命令转成xml来看，然后block需要把那几个都追加到一起就是完整的。比如cat 2 >> 1。

 

NN工作机制：

• NN载入FSImage和edits log到内存
• 2NN定期询问NN是否要checkpoint，NN在两种情况下必须同意：edits满了，或者定时时间到。
• NN把edits数据只读一份拷贝到2NN，另一份最新编辑的edits在手里继续读写。
• 客户端有增删改请求，NN就把操作记录改动记录到最新的editslog中
• 2NN将FSImage和edits加载到内存里面，进行合并后拷贝给NN最新的FSImage。

 

DN工作机制：

• DN主动向NN注册
• 3秒心跳一次，携带NN指令给DN
• 每一段时间DN汇报一次块列表
• 默认超时是10分钟+30秒，超时认为DN死了

 

day03-day05结束。

day06

校验常用 CRC 32位、md5 128、sha1 160，比特位越长，校验可靠性更高 性能消耗也更高。hdfs下载每个数据块都有校验的，带个CRC。

hadoop  fs -put 1.txt /

 

集群扩展，很简单

• 克隆并改ip
• rsync拷贝hadoop和jdk目录过去
• rysnc拷贝/etc/profile.d过去，并source一下
• 手动启服务： hdfs  --daemon  start namenode     yarn --daemon start nodemanager　　　　

 

黑名单和白名单

节点退役，一定用黑名单，然后再关掉。

黑名单配置

在hdfs-site.xml里面指定好黑名单路径

 

vim blacklist

hdfs dfsadmin -refreshNodes

hdfs --daemon stop datanode