随笔分类 -  hadoop

hadoop hive hbase pig zk mapper reduce
摘要:IDEA就自动把jar包中的字节码反编译为Java源码,并且,我们可以直接下个断点调试程序,但是对于Scala,IDEA的反编译效果并不是很好,如下图所示: 2)提示“Source not found”,我们在看textFile()方法,只可以看到方法的参数列表,方法体的内容却看不到,只能看到“co 阅读全文
posted @ 2017-11-04 11:17 Alamps 阅读(350) 评论(0) 推荐(0) 编辑
摘要:配好了Spark集群后,先用pyspark写了两个小例子,但是发现Tab键没有提示,于是打算转到scala上试试,在spark-shell下有提示了,但是发现不能退格,而且提示也不是复写,而是追加,这样根本就没法写程序. 解决办法: 1.打开会话选项 2.终端-仿真 在终端中选择Linux 3.映射 阅读全文
posted @ 2017-10-14 14:27 Alamps 阅读(562) 评论(1) 推荐(0) 编辑