10 2021 档案
摘要：Vue.js 简介 JS框架 简化Dom操作 响应式数据驱动 第一个Vue程序：（使用Live server插件，开启5500端口） 导入开发版Vue.js 创建Vue实例对象，设置el、data属性 使用模板语法将数据渲染到页面 <div id="app"> {{ message }} </div
阅读全文
摘要：hadoop搭建： 环境搭建：利用分发脚本在所有服务器上部署java和hadoop 组件部署：三个重要组件分别部署在三台服务器上，并修改配置文件 启动集群并测试功能：格式化后分别启动组件并上传文件，配置历史服务器和日志功能 服务器相关概念 类型：文件服务器、数据库服务器、WEB服务器 特点：高处理能
阅读全文
摘要：HDFS基本概念 是一个文件系统，用于存储文件，通过目录树来定位文件；是分布式的，由多个服务器联合起来实现其功。 适合场景：一次写入，多次读出，不可更改。文件写入后就不需要再改变 HDFS特征 优点 高容错，文件报错多个副本 适合处理大数据，数据规模到GB、TB甚至TP；文件数量多到百万级以上均可处
阅读全文
摘要：MapReduce 一个分布式运算程序的编程框架，用户开发“基于Hadoop的数据分析应用”的核心框架。 优点： 易于编程，用户只关心业务逻辑，实现框架的接口 良好的扩展性。可动态增加服务器，解决计算资源不够的问题 高容错性。任意节点挂掉可以将任务转移至其他节点 适合海量数据计算。（TB/PB级别）
阅读全文
摘要：问题原因：这里的问题是IntelliJ试图在不使用IDE中配置的Maven“用户设置文件”(settings.xml)的情况下解决所需的工件本身。它将直接连接到Maven Central，但被我的雇主屏蔽了 解决方案在pom文件添加： <dependency> <!-- this is needed
阅读全文
摘要：前置概念： 磁盘预读：内存跟磁盘在发生数据交互的时候，一般情况下有一个最小的逻辑单元，即"页"/"datapage"，页一般由操作系统决定是多大，一般是4k或8k。而进行数据交互的时候，可以取页的整数倍来读取。如innodb引擎每次读取数据都是16k B+树 每个关键字对应一棵子树 每个结点关键字个
阅读全文
