02 2017 档案

摘要:1、spark安装前提——必须安装好Hadoop(本人有三台机,已安装好Hadoop) 2、下载spark,解压至master机本地文件 3、修改/conf/spark-env.sh(原名spark-env.sh.template,把它改过来) 配置如下: 4、修改/conf/spark-defau 阅读全文
posted @ 2017-02-24 07:37 LazyJoJo 阅读(1706) 评论(0) 推荐(0) 编辑
摘要:复制 cp a b (a为旧的,b为新的) 修改 mv a b (a为旧的,b为新的) 修改 mv a b (a为旧的,b为新的) 阅读全文
posted @ 2017-02-18 17:26 LazyJoJo 阅读(4347) 评论(0) 推荐(0) 编辑
摘要:Ubuntu Linux可以把分区作为挂载点,载入目录,其中最常用的目录如下表所示: 目录建议大小格式描述 / 10G-20G ext4 根目录 swap <2048M swap 交换空间 /boot 200M左右 ext4 Linux的内核及引导系统程序所需要的文件,比如 vmlinuz init 阅读全文
posted @ 2017-02-18 17:24 LazyJoJo 阅读(163) 评论(0) 推荐(0) 编辑
摘要:# java homeJAVA_HOME=/usr/local/jdk/jdk1.8.0_121JRE_HOME=JAVA_HOME/jreCLASSPATH=.:$JAVA_HOME/lib:$JRE_HOME/libPATH=$PATH:$JAVA_HOME/binexport PATH JAV 阅读全文
posted @ 2017-02-18 17:22 LazyJoJo 阅读(211) 评论(0) 推荐(0) 编辑
摘要:sudo passwd root 首先要先输入当前用户的密码,再在"输入新的UNIX密码"后面输入你想要设置的 root 密码即可,然后就可以切换到 super user 了: $ su 在弹出的提示中输入刚才设置的root密码就会变成 root 用户了! 阅读全文
posted @ 2017-02-18 17:21 LazyJoJo 阅读(10198) 评论(0) 推荐(0) 编辑
摘要:第一步:ubuntu主机名位于/etc/hostname里,将其修改为自己需要的名称。 第二步:修改/etc/hosts文件,将其中127.0.1.1对应的主机名更改为新的主机名,与/etc/hostname里的主机名一致。 第三步:重启系统。vmware 中使用克隆,复制多个虚拟机,虚拟机除了主机 阅读全文
posted @ 2017-02-18 17:20 LazyJoJo 阅读(488) 评论(0) 推荐(0) 编辑
摘要:重启命令: 1、直接reboot 2、shutdown -r now 这两种都是立刻重启 3、shutdown -r 大概30秒后会重启 关机命令:1、halt 立刻关机2、poweroff 立刻关机3、shutdown -h now 立刻关机(root用户使用)4、shutdown -h 10 1 阅读全文
posted @ 2017-02-18 17:19 LazyJoJo 阅读(1240) 评论(0) 推荐(0) 编辑
摘要:ssh免密登录工作原理 server A免登录到server B: 1.在A上生成公钥私钥。 2.将公钥拷贝给server B,要重命名成authorized_keys(从英文名就知道含义了) 3.Server A向Server B发送一个连接请求。 4.Server B得到Server A的信息后 阅读全文
posted @ 2017-02-18 17:18 LazyJoJo 阅读(2213) 评论(0) 推荐(0) 编辑
摘要:1、JDK的安装 2、配置hosts文件(这个也要拷贝给所有slave机,scp /etc/hosts root@slave1:/etc/hosts) gedit /etc/hosts 添加: 122.205.135.211 master 122.205.135.212 slave1 122.205 阅读全文
posted @ 2017-02-18 17:11 LazyJoJo 阅读(2570) 评论(0) 推荐(0) 编辑
摘要:vim安装:apt-get install vim-gtk vim使用:默认启动插入模式,或者按‘I’进入插入模式,退出插入模式按‘esc’,用冒号‘:wq’进行保存退出; 其复制和粘贴是靠鼠标右键中的选项 vim使用:默认启动插入模式,或者按‘I’进入插入模式,退出插入模式按‘esc’,用冒号‘: 阅读全文
posted @ 2017-02-17 22:02 LazyJoJo 阅读(215) 评论(0) 推荐(0) 编辑
摘要:1.由于Array是不可变的,所以不能直接地对其元素进行删除操作,只能通过重赋值或过滤生成新的Array的方式来删除不要的元素。 而ArrayBuffer是可变的,本身提供了很多元素的操作,当然包括删除操作。( 如果你需要在Array和ArrayBuffer之间转换,那么分别调用toArray()和 阅读全文
posted @ 2017-02-17 21:56 LazyJoJo 阅读(6837) 评论(0) 推荐(0) 编辑
摘要:Scala 通过在参数的类型之后放一个星号来设置可变参数(可重复的参数) 输出结果为: Arg value[0] = RunoobArg value[1] = ScalaArg value[2] = Python 阅读全文
posted @ 2017-02-17 16:45 LazyJoJo 阅读(266) 评论(0) 推荐(0) 编辑
摘要:T:ClassTag的例子(根据输入动态定义) 命令行代码: 阅读全文
posted @ 2017-02-17 16:37 LazyJoJo 阅读(13937) 评论(0) 推荐(2) 编辑
摘要:1、空格加_可以表示函数的原型 命令行代码: 2、其他_的使用 阅读全文
posted @ 2017-02-17 16:28 LazyJoJo 阅读(1422) 评论(0) 推荐(0) 编辑
摘要:基本类的使用:(初) 类的继承和判断对象是否相等(中) 注:对于无序表寻找是否有相同的对象时,使用hashcode可以大大提高速度。equal的比较通常比较耗资源,可以先比较hashcode后,确认hashcode相同时再用equal比较。 hashcode相同,equal不一定相同;equal相同 阅读全文
posted @ 2017-02-17 16:17 LazyJoJo 阅读(3802) 评论(0) 推荐(0) 编辑