午夜的风

  博客园  :: 首页  :: 新随笔  :: 联系 :: 订阅 订阅  :: 管理

在上一篇中把intelliJ IDEA安装并配置完事后,我们就可以写scala程序了。编写完scala程序后我们要把程序导出,上传到服务器上,在spark集群下运行,下面就讲一下包的导出过程以及包在服务集群上的运行过程。

首先打开软件进入界面,点击file,在下拉菜单中选择project Structure项,如下图

然后进入如下界面,依次如图选择即可

进入如下界面,选择Main class,点击ok

然后进入以下界面,一定注意把Name项中的名称改掉,把:jar删除!然后路径可以自己设置,然后点击Apply,最后点击ok

退回到主界面,点击build,选择下拉菜单中Build Artifacts项,如下图,然后依次点击弹出的build即可,这样jar包就导出了。

将自己的jar包上传到服务器上,一般用WinSCP就非常方便,然后就可以运行了。

在~/bin路径下

spark-submit --class  scllxt.word --master spark://Master:7077 /home/(路径)

然后提交就ok了。

好了,整个我们就完成了一个小小的spark程序,后面要继续努力,利用一个寒假时间,努力充电!

 

posted on 2016-01-15 00:40  hard-working  阅读(1295)  评论(0编辑  收藏  举报