挪威森林猫

摘要： 1. 线程是可以有生命周期的,一般命令执行完就会自动退出 package com; import java.util.concurrent.Executors; import java.util.concurrent.ThreadPoolExecutor; public class MyThread 阅读全文

摘要： 1 . 线程安全意味着对某些类创建的对象执行方法时, 对其进行上锁 . 其很多方法都加了 synchronized , 也就是同时刻 只能有一个线程去执行一个方法 . 关键的获取长度 , 增加以及其它 , 都是加了锁的 .所以是线程安全的 , 但是 它的效率不高` 阅读全文

摘要： 1. 用idea的maven项目 package 打包, 去 Linux 执行 spark-submit --class com.Spark_HDFS --master local ./SXC-1.0-SNAPSHOT.jar 遇到 找不到主类 , 这时候需要更加稳定的打包方式 去打包 scala 阅读全文

摘要： 1. 位于 $HADOOP_HOME/etc/hadoop/mapred-site.xml 文件 这里记录的是WEB访问的端口 那么我们需要打开历史服务 mr-jobhistory-daemon.sh start historyserver 再 浏览器输入 node1:19888 就可以直接看到执行 阅读全文

摘要： abc=ssf:goof:navicat abc2=${abc//:/ } #双斜杠是全局替换 , 而不是替换一个就结束 echo $abc2 结果: ssf goof navicat 注意 ,abc/:/空格 是冒号替换成空格或其它! abc//:/空格 是把所有的冒号替换成其它! 阅读全文

摘要： #!/bin/bash a="node1 node2 node3 node4 node5" OLD_IFS="$IFS" IFS=" " arr=($a) IFS="$OLD_IFS" for s in ${arr[@]} do echo "$s" done 第二种: 用awk a="node1 n 阅读全文

摘要： 1. 比如一个字符串是 a="hello\nI love\nyou\nalso" 但是我们想echo $a并做到换行 那么则需要 echo -e "$a" helloI loveyoualso 阅读全文

摘要： 1. xml文件一般都是key-value形式 , 那么我们需要先定位到key ,再取下一行进行整体替换 #!/bin/bash #需要修改的value的 key a=ha.zookeeper.quorum #需要修改成的值 b="node1:2181;node2:2181;node3:2345" 阅读全文

摘要： 核心代码如下 object Sprk { import org.apache.log4j.{Level, Logger} import org.apache.spark.sql.SparkSession def main(args: Array[String]): Unit = { Logger.g 阅读全文

摘要： 1. 需要修改 hive的 conf 下 hive-site.xml 添加 <!--这是service2的配置--> <property> <name>hive.server2.thrift.port</name> <value>10000</value> </property> <property 阅读全文