jupyter Notebook中集成pyspark
1、修改/etc/profile文件
命令:sudo vi /etc/profile 添加如下设置
########spark ipython notebook############ export PYSPARK_DRIVER_PYTHON=ipython export PYSPARK_DRIVER_PYTHON_OPTS="notebook"
2、打开shell 输入pyspark即可自动打开notebook
3、jupyter运行界面
友情提示:shell中进入的路径决定你的列表中显示的文件,如果想直接显示已经创建好的note直接进入到该文件夹中再运行pyspark命令即可。
-----------------------------------------------------------------------------------------------------------------------------------------------------
秋名山上行人稀, 常有车手较高低。 如今车道依旧在, 不见当年老司机。