2018年3月18日
摘要: 1:遇到这个问题是在启动bin/spark-shell以后,然后呢,执行spark实现wordcount的例子的时候出现错误了,如: 执行上面操作之前我是这样启动我的spark-shell的,如下所示: 问题就出现在这里,首先你要知道自己笔记本的内存大小,如果你租的服务器内存应该可以满足你的需求,这 阅读全文
posted @ 2018-03-18 20:06 别先生 阅读(7937) 评论(2) 推荐(0) 编辑
摘要: 1:练习spark的时候,操作大概如我读取hdfs上面的文件,然后spark懒加载以后,我读取详细信息出现如下所示的错误,错误虽然不大,我感觉有必要记录一下,因为错误的起因是对命令的不熟悉造成的,错误如下所示: 2:错误原因如下所示: 我使用了如下所示命令来读取hdfs上面的文件,scala> va 阅读全文
posted @ 2018-03-18 15:42 别先生 阅读(2261) 评论(0) 推荐(0) 编辑