摘要: 一、前提条件 1.1创建3台虚拟机,且配置好网络,建立好互信。 1.2 Java1.8环境已经配置好 1.3 Hadoop2.7.7集群已经完成搭建,具体参见我的博客https://www.cnblogs.com/theyang/p/12363276.html 1.4 Scala软件包和Spark软 阅读全文
posted @ 2020-04-16 23:16 羊想云彩 阅读(219) 评论(0) 推荐(0) 编辑
摘要: 一、概述 1. RPC 的全称是 Remote Procedure Call(远程过程调用)是一种进程间通信方式2. 它允许程序调用另一个地址空间(通常是共享网络的另一台机器上)的过程或函数,而不用程序员显式编码这个远程调用的细节。 即程序员无论是调用本地的还是远程的,本质上编写的调用代码基本相同 阅读全文
posted @ 2020-04-16 10:34 羊想云彩 阅读(250) 评论(0) 推荐(0) 编辑
摘要: 一、概述 1. 数据序列化就是将对象或者数据结构转化成特定的格式,使其可在网络中传输,或者可存储在内存或者文件中2. 反序列化则是相反的操作,将对象从序列化数据中还原出来数据序列化的重点在于数据的交换和传输 二、衡量标准 1. 序列化之后的数据大小。因为序列化的数据要通过网络进行传输或者是存储在内存 阅读全文
posted @ 2020-04-16 10:18 羊想云彩 阅读(293) 评论(0) 推荐(0) 编辑