08 2020 档案

线上项目问题调查和调优（未完待续。。。。）
摘要：发现jvm进程pid jps -v jinfo查看详细 jinfo -flags 26682 jmap查看堆内存大小占用情况,使用的是java8 默认垃圾回收器，内存模型为分代模型 jmap -heap 26682 到此还看不出什么问题，需要进一步调查 修改 JAVA_OPTS当出现OOM时，将jv 阅读全文
posted @ 2020-08-28 17:03 火火火火四火 阅读(143) 评论(0) 推荐(0)
Spark四种运行模式和RDD常用创建方法
摘要：/** * Spark的四种运行模式 * 本地模式, Standalone模式, Spark on Yarn模式, Spark on Mesos模式 */ ////进行配置， setMaster("local")本地运行模式 val conf = new SparkConf().setAppName 阅读全文
posted @ 2020-08-27 16:50 火火火火四火 阅读(291) 评论(0) 推荐(0)
Spark Word Count 和RDD执行过程
摘要：![](https://img2020.cnblogs.com/blog/1395697/202008/1395697-20200827160234868-902450118.png) 阅读全文
posted @ 2020-08-27 16:03 火火火火四火 阅读(115) 评论(0) 推荐(0)
IDEA中代码无故报红解决方法
摘要：方法一：maven reimport 方法二：file->invalidate caches /restart 方法三：gradle项目，把build.gradle依赖项任意一项删掉再恢复，让gradle重新导入 方法四：删除.idea，重新建立工程 方法五：重装IDEA 以上方法逐一尝试 阅读全文
posted @ 2020-08-06 08:40 火火火火四火 阅读(10166) 评论(0) 推荐(0)