摘要: 1.类和对象 //1. Scala中类和对象的创建 object Demo01 {//单例对象,里边是用来定义静态内容的 //定义一个类 //1. 如果构造器是空的可以省略(),2. 如果类时空的可以省略{} class Person //程序的入口,相当于java中的main方法 def main 阅读全文
posted @ 2019-10-30 15:19 单词计数程序大牛 阅读(361) 评论(0) 推荐(0) 编辑
摘要: 1. HDFS架构是怎样的? hadoop1.x中采用master/slave架构,hdfs集群有一个namenode和多个datanode组成。 namenode namenode负责原数据的管理,包括文件目录和文件的元数据管理。 namenode文件到block块位置的映射,namenode并不 阅读全文
posted @ 2019-10-27 17:44 单词计数程序大牛 阅读(262) 评论(0) 推荐(0) 编辑
摘要: 1. 事务的四大特性 原子性:不可分割的单元,事务中的所有操作,要么全部成功,要么撤回执行事务之前的状态。例如:转账A减钱,B加钱。 一致性:如果执行事务前数据库是一致的,那么在执行事务之后数据库也是一致的。例如:转账前A和B总金额是一万元,转账后总金额也是一万元。 隔离性:一个事务的执行不应该受到 阅读全文
posted @ 2019-10-27 13:41 单词计数程序大牛 阅读(139) 评论(0) 推荐(0) 编辑
摘要: 1. sleep()和wait()方法的区别? sleep让线程休眠指的时间,到时间线程会自动醒来 wait让线程处于等待的状态,线程不会自动醒来,必须被唤醒。//notify(),notifyAll() 2. wait(),notify(),notifyAll(),为什么定义到Object类中,而 阅读全文
posted @ 2019-10-25 12:52 单词计数程序大牛 阅读(119) 评论(0) 推荐(0) 编辑
摘要: 1. 什么是JVM JVM(Java Virtual Machine)是用来保证java的跨平台性的,将.class字节码文件转换成操作系统能够直接识别的指令,它的本质是一个进程。 2. Java对象编译过程 主要分为两个部分: 源文件编译成字节码对象 字节码由java虚拟机解释执行 3. 类加载器 阅读全文
posted @ 2019-10-24 18:48 单词计数程序大牛 阅读(159) 评论(0) 推荐(0) 编辑
摘要: 1. 消息队列的介绍 消息队列:一种应用间的通信方式,消息发送后立即返回。 我们可以把消息队列比作是一个存放消息的容器,当我们使用消息的时候可以取出消息供自己使用,消息队列是分布式系统中的重要组件,使用消息队列主要是为了异步处理提高系统性能和削峰,降低系统耦合性。 https://www.jians 阅读全文
posted @ 2019-10-21 21:13 单词计数程序大牛 阅读(201) 评论(0) 推荐(0) 编辑
摘要: 1. 流量分析 a. 基础指标多维度统计分析 统计 PageView 浏览次数(pv) select count(*) from ods_weblog_detail where datestr ="20181101" and valid = "true"; 排除静态资源 统计Unique Visit 阅读全文
posted @ 2019-10-15 21:02 单词计数程序大牛 阅读(185) 评论(0) 推荐(0) 编辑
摘要: 1. Hive基本操作 a. DML操作 load:加载时只是把数据文件移动到hive表对应的位置。 loacl如果指定了就在本地的文件系统,local会将本地文件系统的文件复制到目标文件系统中。 overwrite:如果使用了overwrite目标表或者分区中的内容就会被覆盖。 loacl如果指定 阅读全文
posted @ 2019-10-15 19:41 单词计数程序大牛 阅读(250) 评论(0) 推荐(0) 编辑
摘要: 1. 读取myuser这张表当中的数据写入到HBase的另外一张表当中去 package com.itheima; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.conf.Configured; impor 阅读全文
posted @ 2019-10-15 17:18 单词计数程序大牛 阅读(205) 评论(0) 推荐(0) 编辑
摘要: package com.itheima; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.*; import org.apache.hadoop.hbase.client.*; import or 阅读全文
posted @ 2019-10-15 14:30 单词计数程序大牛 阅读(203) 评论(0) 推荐(0) 编辑