随笔分类 - 架构
摘要:RBAC角色访问控制(RBAC)引入了Role的概念,目的是为了隔离User(即动作主体,Subject)与Privilege(权限,表示对Resource的一个操作,即Operation+Resource)。 Role作为一个用户(User)与权限(Privilege)的代理层,解耦了权限和用户的
阅读全文
摘要:一、ClickHouse的核心特性 1. 完备的DBMS功能 ClickHouse拥有完备的管理功能,所以它称得上是一个DBMS ( Database Management System,数据库管理系统 ),而不仅是一个数据库。作为一个DBMS,它具备了一些基本功能,如下所示。 DDL ( 数据定义
阅读全文
摘要:rpc:远程过程调用,(不同进程的方法调用,客户端调用服务端的方法,方法的执行是在服务端)包括传输协议和序列化协议(编码协议) 传输协议包含: http2 协议,也有如dubbo一类的自定义报文的tcp协议。 序列化协议包含: 如基于文本编码的 xml json,也有二进制编码的 protobuf
阅读全文
摘要:数据仓库对外直接提供规整的数据分析能力,一般由BI工具或者大数据挖掘工具负责,而数据中台直接将数据封装成服务,以API等方式对外输出。数据中台原则上只提供通用的服务接口,个性化在业务层实现,简化上层业务使用,提升对业务需求的响应效率。 数据挖掘是一个利用各种方法,从海量的有噪声的凌乱数据中,提取隐含
阅读全文
摘要:分析型数据库MySQL版(AnalyticDB for MySQL)是一种高并发低延时的PB级实时数据仓库,全面兼容MySQL协议以及SQL:2003 语法标准,可以毫秒级针对万亿级数据进行即时的多维分析透视和业务探索。 在业务系统中,我们通常使用的是OLTP(On-Line Transaction
阅读全文
摘要:Server +less 没有服务器,不需要去部署 Serverless computing refers to the concept of building and running applications that do not require server management. 无服务器计
阅读全文
摘要:1.大数据计算服务(Maxcompute,原名ODPS) MaxCompute is a big data processing platform developed by Alibaba Cloud independently. It is a fast and cloud-based big d
阅读全文
摘要:Reliability 高可靠性 Availability 高可用性 Serviceability 高服务性
阅读全文
摘要:1.寄存器-> 缓存->内存->硬盘 只要能存储数据的器件都可以称之为存储器,它的含义覆盖了寄存器,缓存,内存,硬盘。 cpu访问快慢的速度依次为:寄存器-> 缓存->内存->硬盘 寄存器(register)是中央处理器的组成部分,是一种直接整合到cpu中的有限的高速访问速度的存储器,它是有一些与非
阅读全文
摘要:1、概念与作用 HDFS,是一个分布式文件系统,用来解决海量数据的存储问题。 2、设计思路 1、分而治之/分块存储 (把一个大文件切分成多个小文件,每一个节点存储一部分小文件) 使用一个集群来联合存储这个文件 2、冗余存储 一个数据块存储多个副本。多个副本分散存储在多个不同的节点上。 提高副本数,有
阅读全文
摘要:1.为什么学金字塔原理 人类的大脑是按照金字塔的结构去认知这个世界的,帮助我们掌握层次性、结构化的思考、沟通技术,可以用于结构化的说话与写作过程。 收集产品信息,编制使用手册。 收集战场信息,制定攻击计划。 收集岗位信息,制定面试策略。 1.为什么写出来的东西质量很差 思考上缺乏系统性的理解方法,导
阅读全文