JIT即时编译器
摘要:一、概念 Java是编译与解释共存的语言,简单来说,字节码文件通过解释器进行一行一行解释执行,当虚拟机发现某个方法或代码块的运行特别频繁,就会把这些代码认定为“热点代码”(Hot Spot Code),在运行时,虚拟机将会把这些代码编译成本地机器码。因此被称为“即时编译”(即JIT),热点代码的本地
阅读全文
datanode 宕机后,恢复的流程
摘要:一、大致流程 Datanode宕机了后,如果是短暂的宕机,可以实现写好脚本监控,将它启动起来。如果是长时间宕机了,那么datanode上的数据应该已经被备份到其他机器了,那这台datanode就是一台新的datanode了,删除他的所有数据文件和状态文件,重新启动。 二、详细流程 总体上涉及了心跳检
阅读全文
Hadoop读写流程
摘要:一、HDFS读流程 1、client跟namenode通信查询元数据,找到文件块block所在的datanode服务器 2、挑选一台datanode(就近原则,然后随机)服务器,请求建立socket流 3、datanode开始发送数据(从磁盘里面读取数据放入流,以packet为单位来做校验,大小为6
阅读全文