摘要： Spark集群master节点： 192.168.168.200 Eclipse运行windows主机： 192.168.168.100 场景： 为了测试在Eclipse上开发的代码在Spark集群上运行的情况，比如：内存、cores、stdout以及相应的变量传递是否正常！ 生产环境是把在Ecli 阅读全文

摘要： 我们在编写Spark Application或者是阅读源码的时候，我们很想知道代码的运行情况，比如参数设置的是否正确等等。用Logging方式来调试是一个可以选择的方式，但是，logging方式调试代码有很多的局限和不便。今天我就来介绍如何通过IDE来远程调试Spark的Application或者是 阅读全文