02 2017 档案
摘要:1、spark安装前提——必须安装好Hadoop(本人有三台机,已安装好Hadoop) 2、下载spark,解压至master机本地文件 3、修改/conf/spark-env.sh(原名spark-env.sh.template,把它改过来) 配置如下: 4、修改/conf/spark-defau
阅读全文
摘要:复制 cp a b (a为旧的,b为新的) 修改 mv a b (a为旧的,b为新的) 修改 mv a b (a为旧的,b为新的)
阅读全文
摘要:Ubuntu Linux可以把分区作为挂载点,载入目录,其中最常用的目录如下表所示: 目录建议大小格式描述 / 10G-20G ext4 根目录 swap <2048M swap 交换空间 /boot 200M左右 ext4 Linux的内核及引导系统程序所需要的文件,比如 vmlinuz init
阅读全文
摘要:# java homeJAVA_HOME=/usr/local/jdk/jdk1.8.0_121JRE_HOME=JAVA_HOME/jreCLASSPATH=.:$JAVA_HOME/lib:$JRE_HOME/libPATH=$PATH:$JAVA_HOME/binexport PATH JAV
阅读全文
摘要:sudo passwd root 首先要先输入当前用户的密码,再在"输入新的UNIX密码"后面输入你想要设置的 root 密码即可,然后就可以切换到 super user 了: $ su 在弹出的提示中输入刚才设置的root密码就会变成 root 用户了!
阅读全文
摘要:第一步:ubuntu主机名位于/etc/hostname里,将其修改为自己需要的名称。 第二步:修改/etc/hosts文件,将其中127.0.1.1对应的主机名更改为新的主机名,与/etc/hostname里的主机名一致。 第三步:重启系统。vmware 中使用克隆,复制多个虚拟机,虚拟机除了主机
阅读全文
摘要:重启命令: 1、直接reboot 2、shutdown -r now 这两种都是立刻重启 3、shutdown -r 大概30秒后会重启 关机命令:1、halt 立刻关机2、poweroff 立刻关机3、shutdown -h now 立刻关机(root用户使用)4、shutdown -h 10 1
阅读全文
摘要:ssh免密登录工作原理 server A免登录到server B: 1.在A上生成公钥私钥。 2.将公钥拷贝给server B,要重命名成authorized_keys(从英文名就知道含义了) 3.Server A向Server B发送一个连接请求。 4.Server B得到Server A的信息后
阅读全文
摘要:1、JDK的安装 2、配置hosts文件(这个也要拷贝给所有slave机,scp /etc/hosts root@slave1:/etc/hosts) gedit /etc/hosts 添加: 122.205.135.211 master 122.205.135.212 slave1 122.205
阅读全文
摘要:vim安装:apt-get install vim-gtk vim使用:默认启动插入模式,或者按‘I’进入插入模式,退出插入模式按‘esc’,用冒号‘:wq’进行保存退出; 其复制和粘贴是靠鼠标右键中的选项 vim使用:默认启动插入模式,或者按‘I’进入插入模式,退出插入模式按‘esc’,用冒号‘:
阅读全文
摘要:1.由于Array是不可变的,所以不能直接地对其元素进行删除操作,只能通过重赋值或过滤生成新的Array的方式来删除不要的元素。 而ArrayBuffer是可变的,本身提供了很多元素的操作,当然包括删除操作。( 如果你需要在Array和ArrayBuffer之间转换,那么分别调用toArray()和
阅读全文
摘要:Scala 通过在参数的类型之后放一个星号来设置可变参数(可重复的参数) 输出结果为: Arg value[0] = RunoobArg value[1] = ScalaArg value[2] = Python
阅读全文
摘要:T:ClassTag的例子(根据输入动态定义) 命令行代码:
阅读全文
摘要:1、空格加_可以表示函数的原型 命令行代码: 2、其他_的使用
阅读全文
摘要:基本类的使用:(初) 类的继承和判断对象是否相等(中) 注:对于无序表寻找是否有相同的对象时,使用hashcode可以大大提高速度。equal的比较通常比较耗资源,可以先比较hashcode后,确认hashcode相同时再用equal比较。 hashcode相同,equal不一定相同;equal相同
阅读全文