04 2022 档案
摘要:这是一个实用的分页类 可能很多人都用过mybatis-plus自带的分页插件吧 这款插件的原理是拼接sql语句 在后面加limit offset 那么!这是查数据库后返回的结果的分页方式对吧! 那如果你的结果不是从数据库查的 是调api查的hadoop的状态呢? 比如你的结果是一个List 每一条都
阅读全文
摘要:Yarn学习 YARN简介 YARN是一个通用资源管理系统和调度平台,可为上层应用提供统一的资源管理和调度 YARN功能说明 资源管理系统:集群的硬件资源,和程序运行相关,比如内存、CPU等。 调度平台:多个程序同时申请计算资源如何分配,调度的规则(算法)。 通用:不仅仅支持MapReduce程序,
阅读全文
摘要:Week2 学习笔记 Hadoop核心组件 Hadoop HDFS(分布式文件存储系统):解决海量数据存储 Hadoop YARN(集群资源管理和任务调度框架):解决资源任务调度 Hadoop MapReduce(分布式计算框架):解决海量数据计算 安装hadoop环境 集群角色规划 服务器 运行角
阅读全文