[随笔]VSCode Remote-ssh+云主机搭建pySpark学习环境

最近spark上机练习比较多,原先采用了虚拟机的方式做练习

第一机器性能比较差,本地体验不好

第二用vscode比较多,轻量好用又熟悉

所以周末抽时间把环境布到开发机上去

构建流程:

  1. 安装vscode

  2. 安装msys2/mingw等模拟shell环境,安装ssh相关组件

    1. 这个可以偷个懒直接装 git for windows 一来这个东西本来就是个简化的msys并且有ssh组件,二来不需要编译项目的话也比较轻量,三来git基本都有,省得麻烦

  3. 老三样密钥连接开发机 -> 启动git bash

    1. $ ssh-keygen

    2. $ ssh-copy-id yourname@yourip

    3. $ ssh yourname@yourip

  4. OK的话本地的公钥已经copy到开发机了,在vscode里面只需要配置下环境地址就vans了

  5. 扩展里安装下remote-ssh 插件 -> 安装完是这个状态

  6. 添加一个新host 

  7. 点击configure把刚添加的host(cloud)改成如上格式 

  8. 右键connect ctrl+` 呼出终端 

  9. 正常 配置spark环境,开发 done!

     

     

posted @ 2020-05-16 18:06  张浦  阅读(857)  评论(0编辑  收藏  举报