06 2019 档案
摘要:作业要求来源:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3363 一、将爬虫大作业产生的csv文件上传到HDFS 二、查看数据集内容 查看评论前五条数据: 处理数据: 编辑dealdata.sh文件处理转化成txt 三、把hdfs
阅读全文
摘要:利用Shell命令与HDFS进行交互 以”./bin/dfs dfs”开头的Shell命令方式 1.目录操作 在HDFS中为hadoop用户创建一个用户目录(hadoop用户) 启动hadoop 创建一个用户目录(hadoop用户) 在用户目录下创建一个input目录 在HDFS的根目录下创建一个名
阅读全文