02 2020 档案
摘要:简介 这个实验要求我们使用 golang 自行实现一个支持并发和简单容错的 分布式 MR ,支持一个 master 多个 wokrer 的工作模式。 我做完实验之后去看了一下之前网上发布的一些 lab1 的作业。感觉今年是不是改版了?后来我去看了一下 2018 年的 lab1 作业,果然改版了。。。
阅读全文
摘要:前言 打算跟着 MIT 的20年春季课程节奏一起通过4个 lab 来更加深刻和系统的来认识和实现分布式系统。我会坚持把每个学习节点和心得和笔记给记录下来。 每个 lec 之前一般要先看甩上来的论文,我之前虽然知晓大数据三驾马车论文大名,但是也从来没有仔细看过。这次花了2天认认真真看了 MapRedu
阅读全文
摘要:简介 是因为某天发现 kill 不掉一个 process,当时那个 process 的状态已经被至为了 killed 却一直在 run 无法结束,于是想强制结束搜到了下面的文章。 结论是无法强制结束,无法关闭可能是因为有事物在回滚 or 磁盘满了无法写入等等等。 Have you ever trie
阅读全文