上一页 1 2 3 4 5 6 ··· 12 下一页
摘要: Scala 介绍与环境配置 Scala介绍 官方文档 Scala用一种简洁的高级语言将面向对象和函数式编程结合在一起。 Scala的静态类型有助于避免复杂应用程序中的错误,其JVM和JavaScript运行时使您可以轻松访问庞大的库生态系统来构建高性能系统。 Spark1.6中使用的是Scala2. 阅读全文
posted @ 2020-12-02 15:49 shaoyayu 阅读(127) 评论(0) 推荐(0) 编辑
摘要: Zookeeper 与RMI 参考: https://my.oschina.net/huangyong/blog/345164 https://www.jianshu.com/p/d8ffa1ff0727 https://developer.ibm.com/zh/articles/os-cn-zoo 阅读全文
posted @ 2020-12-02 15:47 shaoyayu 阅读(174) 评论(0) 推荐(0) 编辑
摘要: Zookeeper java API 测试 pom <!-- https://mvnrepository.com/artifact/org.apache.zookeeper/zookeeper --> <dependency> <groupId>org.apache.zookeeper</group 阅读全文
posted @ 2020-12-02 15:46 shaoyayu 阅读(1352) 评论(0) 推荐(0) 编辑
摘要: Zookeeper 安装与配置 我使用的是解压版的, 直接解压配置环境变量就行了,这里不对安装进行过多的描述 zook.cfg 在文件的/conf/下面的模板配置文件修改成zook.cfg 文件 # The number of milliseconds of each tick tickTime=2 阅读全文
posted @ 2020-12-02 15:44 shaoyayu 阅读(454) 评论(0) 推荐(0) 编辑
摘要: Zookeeper 架构 材料大部分来源于网上,我会备注网址 学习学习 推荐阅读:https://developer.ibm.com/zh/articles/os-cn-zookeeper/ 项目介绍 转至元数据结尾 由 Benjamin Reed创建, 最终由 Carlos D. Morales修 阅读全文
posted @ 2020-12-02 15:43 shaoyayu 阅读(312) 评论(0) 推荐(0) 编辑
摘要: HBase 优化 表优化 在使用List Put写入的时候可能会丢失一些数据,包括读写的时候都有可能存在丢书数据的情况 表切分 默认的表是存储再同一个Region上面的,当表太大的时候,表会自动的切分到其他的Region上面。 手动切分 # 手动的切分表名 >split ‘表名’ 这样当数据太大的时 阅读全文
posted @ 2020-12-02 15:40 shaoyayu 阅读(122) 评论(0) 推荐(0) 编辑
摘要: HBase 与 MapReduce 整合 phoenix.apache.org Mapreduce运行3种方式 本地方式运行: pc环境 1.1、将 Hadoop安装本地解压 1.2、配置 Hadoop的环境变量 添加%HADOOP_HOME% 修改%PATH%添加%HADOOP_HOME%/bin 阅读全文
posted @ 2020-12-02 15:39 shaoyayu 阅读(1092) 评论(0) 推荐(0) 编辑
摘要: 案例: 3、通话记录: 手机号 对方手机号 通话时长 时间 通话类型(主叫/被叫) 后续更新 阅读全文
posted @ 2020-12-02 15:37 shaoyayu 阅读(105) 评论(0) 推荐(0) 编辑
摘要: HBase数据库设计 题目: 1、人员-角色 人员有多个角色 角色优先级 角色有多个人员 人员 删除添加角色 角色 可以添加删除人员 人员 角色 删除添加 2、组织架构 部门-子部门 查询 顶级部门 查询 每个部门的所有子部门 部门 添加、删除子部门 部门 添加、删除 3、通话记录: 手机号 对方手 阅读全文
posted @ 2020-12-02 15:36 shaoyayu 阅读(517) 评论(0) 推荐(0) 编辑
摘要: Fork/Join并发处理框架 学习材料来源于网络 如有侵权,联系删除 概念 ForkJoinPool是ExecutorService接口的实现,它专为可以递归分解成小块的工作而设计。fork / join框架将任务分配给线程池中的工作线程,充分利用多处理器的优势,提高程序性能。 使用fork / 阅读全文
posted @ 2020-12-02 15:20 shaoyayu 阅读(162) 评论(0) 推荐(0) 编辑
上一页 1 2 3 4 5 6 ··· 12 下一页