HDFS数据读取过程以及底层原理

读取：
原理：

1. 在Hadoop里面有一个最初的抽象基类叫FileSystem，可以去继承这个FileSystem抽象基类去实现很多具体的子类。例如去继承FileSystem实现HTTP方式访问相关文件、实现FTP方式进行读写文件，以及继承FileSystem实现DistributedFileSystem类。
   (1)FileSystem的常用方法：open、read、close、create
   (2)open方法一般是创建一个输入流(读文件的时候必须要先创建输入流)，返回FSDataInputStream对象。FSDataInputStream对象里面封装了一个DFSInputStream(针对HDFS的实现)
   (3)create方法是会创建一个输出流，返回的是FSDataOutputStream对象。
   (4)FileSystem.get(new Configuration()) 这个代码作用是把hdfs-site.xml和core-site.xml两个配置文件加载进来、重点读取fs.defaultFS。
   (5)FileSystem fs = FileSystem.get(new Configuration()) 里面的fs是HDFS的对象。
   (6)具体和名称节点、数据节点进行访问的是DFSInputStream，不是FSDataInputStream。但是用户编程只能看见FSDataInputStream，因为FSDataInputStream里面封装了DFSInputStream。
   即：