摘要: 4、集合(接着上次的集合继续学习) 4.4可变集合 1、ListBuffer val listBuffer1: ListBuffer[Int] = new ListBuffer[Int] println(s"$listBuffer1") listBuffer1.+=(11) listBuffer1. 阅读全文
posted @ 2024-08-23 21:22 shmil 阅读(15) 评论(1) 推荐(1) 编辑
摘要: 2.12 scala中的函数式编程 * scala中的函数式编程 * * 面向对象编程:将对象当作参数一样传来传去 * 1、对象可以当作方法参数传递 * 2、对象也可以当作方法的返回值返回 * 当看到类,抽象类,接口的时候,今后无论是参数类型还是返回值类型,都需要提供对应的实现类对象 * * 面向函 阅读全文
posted @ 2024-08-21 16:38 shmil 阅读(10) 评论(0) 推荐(0) 编辑
摘要: Scala 1、Scala简介 1.1Scala的介绍 scala是一门多范式的编程语言 Scala是把函数式编程思想和面向对象编程思想结合的一种编程语言 大数据计算引擎spark是由Scala编写的 1.2Scala的特性 1.2.1多范式 1.2.1.1面向对象特性 Scala 是一种高度表达性 阅读全文
posted @ 2024-08-20 22:37 shmil 阅读(15) 评论(0) 推荐(0) 编辑
摘要: Hbase之过滤器 HBase 的基本 API,包括增、删、改、查等。 增、删都是相对简单的操作,与传统的 RDBMS 相比,这里的查询操作略显苍白,只能根据特性的行键进行查询(Get)或者根据行键的范围来查询(Scan)。 HBase 不仅提供了这些简单的查询,而且提供了更加高级的过滤器(Filt 阅读全文
posted @ 2024-08-19 15:30 shmil 阅读(63) 评论(0) 推荐(0) 编辑
摘要: 六、Phoenix 3、phoenix表映射 默认情况下,直接在hbase中创建的表,通过phoenix是查看不到的 如果需要在phoenix中操作直接在hbase中创建的表,则需要在phoenix中进行表的映射。映射方式有两种:视图映射和表映射 3.1、视图映射 Phoenix创建的视图是只读的, 阅读全文
posted @ 2024-08-18 22:51 shmil 阅读(18) 评论(1) 推荐(1) 编辑
摘要: HBase进阶下 一、HBase的读写流程 1.1 HBase读流程 Hbase读取数据的流程: 1)是由客户端发起读取数据的请求,首先会与zookeeper建立连接 2)从zookeeper中获取一个hbase:meta表位置信息,被哪一个regionserver所管理着 hbase:meta表: 阅读全文
posted @ 2024-08-17 11:30 shmil 阅读(12) 评论(0) 推荐(0) 编辑
摘要: HBase进阶与API 一、Hbase shell 1、Region信息观察 创建表指定命名空间 在创建表的时候可以选择创建到bigdata17这个namespace中,如何实现呢? 使用这种格式即可:‘命名空间名称:表名’ 针对default这个命名空间,在使用的时候可以省略不写 create ' 阅读全文
posted @ 2024-08-16 23:15 shmil 阅读(14) 评论(0) 推荐(0) 编辑
摘要: 5.4 namespace hbase中没有数据库的概念 , 可以使用namespace来达到数据库分类别管理表的作用 5.4.1 列举命名空间 list_namespace 5.4.2 获取命名空间描述 describe_namespace describe_namespace 'default' 阅读全文
posted @ 2024-08-14 22:30 shmil 阅读(21) 评论(1) 推荐(1) 编辑
摘要: 接着昨天的简单了解继续学习 五、hbase shell 命名 描述 语法 help ‘命名名’ 查看命令的使用描述 help ‘命令名’ whoami 我是谁 whoami version 返回hbase版本信息 version status 返回hbase集群的状态信息 status table_ 阅读全文
posted @ 2024-08-13 15:38 shmil 阅读(15) 评论(1) 推荐(1) 编辑
摘要: HBase架构与基础命令 一、了解HBase 1.1 HBase概述 HBase是基于Hadoop中HDFS做存储的数据库 HBase 是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,用于存储海量的结构化或者半结构化,非结构化的数据(底层是字节数组做存储的) HBase是Hadoop的生态系 阅读全文
posted @ 2024-08-12 19:25 shmil 阅读(26) 评论(1) 推荐(1) 编辑