摘要: IDEA创建Scala项目 1、安装scala插件 2、下载Scala SDK压缩包并解压:https://www.scala-lang.org/download/all.html 3、新建Project -> Scala -> IDEA -> Scala SDK选择解压根目录即可 4、新建Scal 阅读全文
posted @ 2020-06-29 15:39 Coding练习生 阅读(331) 评论(0) 推荐(0) 编辑
摘要: 安装与配置 参考 (node版本可能导致通过npm安装gitbook失败,可通过nvm管理多版本node) GitBook命令 gitbook init xxx:初始化一本书 gitbook build:构建一本书的静态文件,生成的_book目录可用于部署到ngix或tomcat服务器中。 gitb 阅读全文
posted @ 2021-06-03 20:56 Coding练习生 阅读(741) 评论(0) 推荐(0) 编辑
摘要: 利用JMeter测并发:https://www.cnblogs.com/stulzq/p/8971531.html JMeter设置随机参数:选项 -> 函数助手 -> __Random -> 设置最小最大值 -> 拷贝 ${__Random(100,1000,)} 到请求体的值位置处 阅读全文
posted @ 2020-08-24 19:30 Coding练习生 阅读(261) 评论(0) 推荐(0) 编辑
摘要: 问题一:java.lang.NoClassDefFoundError,Could not initialize class 通常原因:类中静态变量初始化失败发生异常,导致报该问题 解决:排查该类所有静态变量能否正常初始化。 阅读全文
posted @ 2020-06-03 15:31 Coding练习生 阅读(115) 评论(0) 推荐(0) 编辑
摘要: driver和executor的参数设置在yarn模式下才会起作用:--driver-cores:Spark应用Driver的CPU核数,Driver主要完成任务的调度以及和executor和cluster manager进行协调。--executor-cores:Spark应用每个Executor 阅读全文
posted @ 2020-03-27 09:41 Coding练习生 阅读(301) 评论(0) 推荐(0) 编辑
摘要: linux版scala:https://downloads.lightbend.com/scala/2.11.0/scala-2.11.0.tgzlinux/windows通用版spark:https://mirrors.tuna.tsinghua.edu.cn/apache/spark/spark 阅读全文
posted @ 2020-03-25 17:49 Coding练习生 阅读(2601) 评论(0) 推荐(0) 编辑
摘要: linux下安装卸载Anaconda: 安装:https://blog.csdn.net/lwgkzl/article/details/89329383 卸载:https://blog.csdn.net/hang916/article/details/79530108 安装卸载简化版的Anacond 阅读全文
posted @ 2020-03-24 22:01 Coding练习生 阅读(4908) 评论(0) 推荐(0) 编辑
摘要: rdd Transformation操作:用于创建新的RDD(返回类型RDD),eg:map、mapPartitions、Filter、groupBy等. # 只是定义操作,获取最终的结果需要调rdd.collect()、rdd.count()等获取rdd信息的函数,才会真正执行定义的函数.有点类似 阅读全文
posted @ 2020-03-23 17:25 Coding练习生 阅读(664) 评论(0) 推荐(0) 编辑
摘要: Python语言特点Python 解释器可不止一种哦,有 CPython、IPython、Jython、PyPy 等。顾名思义,CPython 就是用 C 语言开发的了,是官方标准实现,拥有良好的生态,所以应用也就最为广泛了。而 IPython 是在 CPython 的基础之上在交互式方面得到增强的 阅读全文
posted @ 2020-03-20 15:18 Coding练习生 阅读(179) 评论(0) 推荐(0) 编辑
摘要: 方法1:针对Chrome安装插件“GitZip for github”(貌似对目录中包含的文件个数有限制) 方法2:通过git命令 详见:https://segmentfault.com/q/1010000006666948 方法3:参照方法2自实现的改进版命令 详见:https://github. 阅读全文
posted @ 2020-03-19 11:20 Coding练习生 阅读(813) 评论(0) 推荐(0) 编辑