摘要： 操作系统 CentOS7.5.1804 下载地址：http://mirrors.163.com/centos/7.5.1804/isos/x86_64/ 安装Ambari说明:https://hortonworks.com/downloads/#data-platform 版本和操作系统的对应关系： 阅读全文

摘要： Google机器学习课程基于TensorFlow ： https://developers.google.cn/machine-learning/crash-course https://developers.google.com/machine-learning/crash-course 阅读全文

摘要： 一、隐式转换 隐式转换函数： 指的是以implicit关键字声明的带有单个参数的函数。这样的函数将被自动应用，将值从一种类型转换为另一种类型。 例子： 结果： 二、利用隐式转换丰富现有类库的功能 结果： 三、引入隐式转换 Scala会考虑如下的隐式转换函数： 1.位于源或目标类型的伴生对象中的隐式函 阅读全文

摘要： 模式匹配应用场景：switch语句，类型查询，析构，样例类 一、更好的switch case _ 匹配其他情况，case 结尾不需要break跳出 二、守卫 守卫可以是任何Boolean条件； 匹配是顺序下来的，上面的例子是匹配不到守卫的。 三、模式中的变量 case _ 看做是这个特性的一个特殊情 阅读全文

摘要： Spark性能优化指南——基础篇 https://tech.meituan.com/spark-tuning-basic.html Spark性能优化指南——高级篇 https://tech.meituan.com/spark-tuning-pro.html [Spark性能调优] 第二章：彻底解密 阅读全文

摘要： 异常：进入Hive View提示user home check fail 详细日志：Service 'userhome' check failed: java.io.FileNotFoundException: File does not exist: /user/admin 处理方式： 查看目录结 阅读全文

摘要： 指定行:n 光标行之前或之后的n个字符nl 之后 2l 光标位置两个字符后nh 之前 2h 光标位置两个字符前 光标行之上或之下的n个字符nk 之上 1k 光标位置1个字符之上nj 之下 1j 光标位置1个字符之下 在vi的命令状态下,执行如下指令 ::%!xxd 将当前文本转换为16进制格式，十六 阅读全文

摘要： 方法1： hive -f sql文件 t.sql文件内容： 执行命令 方法2： 进入hive shell, 执行source命令 进入hive 终端 使用source命令执行 阅读全文

摘要： 知识点1：创建关联Hbase的Hive表 知识点2：Spark访问Hive 知识点3：Spark访问与Hbase关联的Hive表 知识点1：创建关联Hbase的Hive表 两种方式创建，内部表和外部表 内部表，如果删除hive表，hbase表也会删除；不建议使用这种方式，大多数都是关联进行查询操作 阅读全文

摘要： 终于完成了这个课程，从开始学习，到现在差不多过了一年的时间，中间由于一些原因耽搁了，最终还是完成了，记录一下！ 阅读全文