spark(2.1) - spark-shell 下文件系统的数据读写

spark-shell

 

本地文件系统数据读写 [ file:// ]

 

读取 ：sc.textFile (" ****")

写入：saveAsTextFile ("****")

 

HDFS文件的读写 [ hdfs:// ]

读取 ：sc.textFile (" ****")

 写入：saveAsTextFile ("****")

 

 

其他的函数

* 行数统计 ： count()

* 显示第一行：first()