spark实验四(2)
第二题:
第一步:在当前目录下新建一个目录 mkdir -p
src/main/scala,然后在目录/usr/local/spark/mycode/remdup/src/main/scala 下新建一个
remdup.scala
![](https://img2018.cnblogs.com/i-beta/1279500/202002/1279500-20200207201607393-1395183176.png)
在目录/usr/local/spark/mycode/remdup 目录下新建 simple.sbt
![](https://img2018.cnblogs.com/i-beta/1279500/202002/1279500-20200207201625494-831294327.png)
在目录/usr/local/spark/mycode/remdup 下执行下面命令打包程序
![](https://img2018.cnblogs.com/i-beta/1279500/202002/1279500-20200207201639162-1324231249.png)
最后在目录/usr/local/spark/mycode/remdup 下执行下面命令提交程序
![](https://img2018.cnblogs.com/i-beta/1279500/202002/1279500-20200207201657473-1011274462.png)
在目录/usr/local/spark/mycode/remdup/result 下即可得到结果文件。
是多疑还是去相信
谎言背后的忠心
或许是自己太执迷
命题游戏
沿着他的脚步 呼吸开始变得急促
就算看清了面目 设下埋伏
真相却居无定处
I swear I'll never be with the devil
用尽一生孤独 没有退路的路
你看不到我
眉眼焦灼却不明下落
命运的轮轴
伺机而动 来不及闪躲
沿着他的脚步 呼吸开始变得急促
就算看清了面目 设下埋伏
真相却居无定处
I swear I'll never be with the devil
用尽一生孤独 没有退路的路
你看不到我
眉眼焦灼却不明下落
命运的轮轴
伺机而动 来不及闪躲
你看不到我
眉眼焦灼却不明下落
命运的轮轴
伺机而动 来不及闪躲
黑夜和白昼
你争我夺 真相被蛊惑
心从不退缩
这天堂荒漠 留给孤独的猎手