上一页 1 ··· 9 10 11 12 13 14 15 16 17 ··· 26 下一页
摘要: 由于考试/验收临近,本周主要是复习/完善大作业。 花在学习上:25小时 花在代码上:6小时 花在解决问题上:1小时 本周遇到的问题:(暂无) 阅读全文
posted @ 2020-12-11 11:59 水無月鈴乃 阅读(51) 评论(0) 推荐(0) 编辑
摘要: 本周主要是对需求分析的大作业进行最后的优化完善,并和学弟验收了需求分析的大作业。分类检索部分在需求说明中没提到需要树形结构,但验收标准当中有。同时,我也深刻认识到了一年前我被我对接的那个学长忽悠过去了——他确实实现了树形结构,但是是在菜单里实现而不是在分类检索!(分类检索中实现树形结构难度比菜单中实 阅读全文
posted @ 2020-12-05 17:19 水無月鈴乃 阅读(52) 评论(0) 推荐(0) 编辑
摘要: 这本书终于读完啦~说实话,其实里面很多东西理解的还不是很透彻,以后找机会一定会再去看。第一遍读了《梦断代码》之后,我真的觉得软件开发过程是抽象艰巨的一个事情,我们自以为很有把握,但实际上真的是很难掌控。 就比如说自己吧,之前在做程序的过程中被大大小小无数的问题折磨,碰到这本书的时候,就觉得找到知音了 阅读全文
posted @ 2020-11-30 22:09 水無月鈴乃 阅读(53) 评论(0) 推荐(0) 编辑
摘要: 本周4进行了基本的数据汇总。考虑到需要的操作很多,自己编写MapReduce将会耗费大量的时间。因为本次采用将数据导入Hive之后使用复合SQL语句进行统计汇总。同时也体会到了面对数据量很大的情况下Hive相比于MySQL之类的关系型数据库的处理速度的高效性。 花在学习上:17小时 花在代码上:6小 阅读全文
posted @ 2020-11-28 16:53 水無月鈴乃 阅读(41) 评论(0) 推荐(0) 编辑
摘要: 实在是没想到能通过控制变量找到MapReduce实验的问题所在:300多MB的文件生成的LinkedHashMap对于Map阶段来说还是太大了。 分别拿两个缩减了数据的表文件和完整的表文件后发现的。也在正式运行之后体会到了MapReduce在大量数据的处理上的优势:对于1GB的数据文件,使用MySQ 阅读全文
posted @ 2020-11-24 22:37 水無月鈴乃 阅读(95) 评论(0) 推荐(0) 编辑
摘要: 本周主要进行了MapReduce的作业,但是尚无成效。数据量一大双表汇总的MapReduce就会运行很久之后FAIL掉,原因疑似是空间占用过大,但是尚不清楚具体问题出在哪步。 花在学习上:15小时 花在代码上:11小时 花在解决问题上:10小时 本周遇到的问题: 1.如上所述,数据量一大双表汇总的M 阅读全文
posted @ 2020-11-22 11:32 水無月鈴乃 阅读(63) 评论(0) 推荐(0) 编辑
摘要: 本周主要浏览了提供的的MapReduce示例实验代码 花在学习上:15小时 花在代码上:5小时 花在解决问题上:0小时 本周遇到的问题:暂无重大问题 阅读全文
posted @ 2020-11-15 19:51 水無月鈴乃 阅读(76) 评论(0) 推荐(0) 编辑
摘要: 本周尝试性参加了软考。说实话,题目里有不少东西是还没学到的知识点。不过第一次深刻体会到了类图的重要性,一个题目考察了尚未学到的设计模式,而我做这题的时候硬生生依靠分析给出的类图做完这题。 花在学习上:18小时 花在代码上:7小时 花在解决问题上:5小时 本周遇到的问题:暂无重大问题 阅读全文
posted @ 2020-11-08 16:33 水無月鈴乃 阅读(41) 评论(0) 推荐(0) 编辑
摘要: 今天是数据处理。个人采用的方式是MySQL语句连合。 阅读全文
posted @ 2020-11-05 19:53 水無月鈴乃 阅读(18) 评论(0) 推荐(0) 编辑
摘要: 说实话 本周有些懈怠 没有进行太多的开发工作 花在学习上:6小时 花在代码上:10小时 花在解决问题上:6小时 本周遇到的问题:暂无重大问题 阅读全文
posted @ 2020-11-01 20:48 水無月鈴乃 阅读(31) 评论(0) 推荐(0) 编辑
上一页 1 ··· 9 10 11 12 13 14 15 16 17 ··· 26 下一页