12 2017 档案

spark sql01
摘要：package sql; import org.apache.spark.SparkConf; import org.apache.spark.api.java.JavaSparkContext; import org.apache.spark.sql.DataFrame; import org.apache.spark.sql.SQLContext; /** * */ public... 阅读全文
posted @ 2017-12-29 14:22 Alamps 阅读(267) 评论(1) 推荐(0) 编辑
Spark_JGroupByKey
摘要：package core.java; import java.util.Arrays; import java.util.List; import org.apache.spark.SparkConf; import org.apache.spark.api.java.JavaPairRDD; import org.apache.spark.api.java.JavaSparkContext;... 阅读全文
posted @ 2017-12-27 20:29 Alamps 阅读(248) 评论(0) 推荐(0) 编辑
msyql 移动某一列数据到某列 & 字段加前缀
摘要：#移动数据 UPDATE dcs_organize_user AS a, dcs_organize_user AS b SET a.SHORTTELNO=b.USERTELNO WHERE a.id=b.id; #字段加前缀 UPDATE dcs_organize_user SET USERTELNO=CONCAT('0038089819',USERTELNO); 阅读全文
posted @ 2017-12-21 16:13 Alamps 阅读(252) 评论(0) 推荐(0) 编辑
mac connect to host localhost port 22: Connection refused
摘要：在Mac OS X 10.10.5学习hadoop的过程中，输入命令ssh localhost得到 ssh: connect to host localhost port 22: Connection refused 解决方法是选择系统偏好设置->选择共享->点击远程登录 然后再输入命令ssh localhost发现已经解决问题 找到解决方案来自于 http://stackoverflow.c... 阅读全文
posted @ 2017-12-17 14:23 Alamps 阅读(1528) 评论(0) 推荐(0) 编辑
kafka 单机配置
摘要：http://blog.csdn.net/jingshuigg/article/details/24439637 1. su root : chown -R hadoop:hadoop version-2/ drwxr-xr-x. 2 hadoop hadoop 4096 Dec 13 21:19 version-2 drwxr-xr-x. 2 hadoop hadoop 4096 ... 阅读全文
posted @ 2017-12-17 12:41 Alamps 阅读(1125) 评论(0) 推荐(0) 编辑
mac install wget
摘要：没有Wget的日子是非常难过的，强大的Mac OS 下安装Wget非常简单 下载一个Wget的源码包，http://www.gnu.org/software/wget/ ftp下载地址：ftp://ftp.gnu.org/gnu/wget/ 打开终端解压， 1 输入：tar zxvf wget-1.10.1.tar.gz 2 cd 进入到解压的目录 3 输入：./configure... 阅读全文
posted @ 2017-12-17 12:17 Alamps 阅读(1304) 评论(0) 推荐(0) 编辑
同一个电脑安装两个jdk版本
摘要：同一个电脑安装两个jdk版本 场景：公司项目使用的jdk为1.7，最近不是很忙，学习scala。该系统使用到了jdk1.8的特性，所以I need 俩版本，开整！！！ 1 . 准备两个版本的jdk我的两个jdk路径为： D:\jdk1.7.0_80 D:\Program Files\Java\jdk1.8.0_111 2 . 设置两个子JAVA_HOME，一个总设置两个子JAVA_HOME... 阅读全文
posted @ 2017-12-16 14:18 Alamps 阅读(19466) 评论(1) 推荐(0) 编辑
hive javaapi 002
摘要：pom.xml 阅读全文
posted @ 2017-12-05 08:12 Alamps 阅读(521) 评论(0) 推荐(0) 编辑
ActiveMQ之spring集成消息转换器MessageConverter
摘要：MessageConverter的作用主要有两方面，一方面它可以把我们的非标准化Message对象转换成我们的目标Message对象，这主要是用在发送消息的时候；另一方面它又可以把我们的Message对象转换成对应的目标对象，这主要是用在接收消息的时候。 下面我们就拿发送一个对象消息来举例， 传输U 阅读全文
posted @ 2017-12-04 10:24 Alamps 阅读(1368) 评论(0) 推荐(0) 编辑
install Maven
摘要：工欲善其事，必先利其器。咱们也来玩玩 Maven 这货吧！先得去下载一个。 准备工作 java开发环境（JDK） maven下载地址：http://maven.apache.org/release-notes-all.html java开发环境（JDK） maven下载地址：http://maven 阅读全文
posted @ 2017-12-03 16:54 Alamps 阅读(302) 评论(0) 推荐(0) 编辑
install apache-activemq
摘要：进入bin/linux-x86-64下 启动 五、启动成功后，访问 activemq默认端口61616，（官方文档：ActiveMQ's default port is 61616. ） 默认登录用户：admin 密码：admin 修改用户信息编辑 conf/jetty-realm.properti 阅读全文
posted @ 2017-12-01 14:44 Alamps 阅读(151) 评论(0) 推荐(0) 编辑