摘要:
1、类 类是对象的蓝图。在类的定义中,你会填入 字段(field) 和 方法(method), 这些被统称为 成员。 通过 val 或 var 定义的字段是指向对象的变量,通过 def 定义的方法则包含了可执行的代码。字段保留了对象的状态,或者说数据,而方法用数据来对对象执行计算,当你实例化一个类, 阅读全文
摘要:
我是通过 yum 安装的 Mysql Mysql的版本是 8.0.15 Mysql 开启、关闭、重启的命令分别是 Mysql的进入命令 创建 DataBase 查看数据库 查看数据库用户 创建用户并向用户赋权限 Mysql忘记密码 解决方案 首先到mysql的配置文件 my.cnf 里面添加 ski 阅读全文
摘要:
Scala的集合类Map,跟集(Set) 类似,Scala提供了Map的可变和不可变的版本,用类的继承关系来区分。在 scala.collection包里面有一个基础的 Map 特质,还有两个子特质,都叫Map,可变的那个位于 scala.collection.mutable,而不可变的那个位于 s 阅读全文
摘要:
闭包 闭包是一个函数,返回值依赖于声明在函数外部的一个或多个变量。 闭包通常来讲可以简单的认为是可以访问一个函数里面局部变量的另外一个函数。 在 multiplier 中有两个变量:i 和 factor。其中的一个 i 是函数的形式参数,在 multiplier 函数被调用时,i 被赋予一个新的值。 阅读全文
摘要:
List和数组是非常相似的。列表的所有元素都具有相同的类型。二者的区别在于:1、List是不可变的,这意味着List的元素无法通过分配进行更改。List代表一个链表,而数组是平面的。 创建一个List: 两种方式创建一个空列表: 用字符串创建列表: 使用 ::: 创建一个新列表 过滤获得 numLi 阅读全文
摘要:
Redis做消息队列的好处在于它的轻量级,高并发,延迟敏感,应用场景有 即时数据分析、秒杀计数器、缓存等 Redis做消息队列待解决的问题: 1、消息的可靠性: 没有相应的机制保证消息的消费,当消费者消费失败的时候,消息体丢失,需要手动处理。生产者只管向队列中插入数据,不管消费者是否成功消费。 2、 阅读全文
摘要:
一、Spark Streaming Spark Streaming是核心Spark API的扩展,可实现实时数据流的可扩展,高吞吐量,容错流处理。数据可以从许多来源(如Kafka,Flume,Kinesis或TCP sockets)中提取,并且可以使用以高级函数表示的复杂算法进行处理map,例如re 阅读全文
摘要:
一、什么是Zookeeper? ZooKeeper 是一个开源Apache项目,提供集中式服务,用于在分布式系统中的大型集群上提供集中服务,用于维护命名和配置数据,并在分布式系统中提供灵活,强大的同步。Zookeeper 跟踪 Kafka 集群节点的状态,并跟踪Kafka主题,分区等。Zookeep 阅读全文
摘要:
一、什么是Kafka? Apache Kafka是一个社区分布式事件流平台,能够每天处理数万亿个事件。Kafka最初被设想为消息传递队列,它基于分布式提交日志的抽象。自2011年由LinkedIn创建并开源以来,Kafka已迅速从消息队列发展成为一个成熟的事件流平台。用作 LinkedIn 的活动流 阅读全文
摘要:
~/kafka-manager/target/universal/kafka-manager-2.0.0.2/bin 文件夹下运行 运行成功的结果返回是 阅读全文