12 2024 档案
摘要:软考复习 1.体系结构分类文老师软考教育单指令流单数据流多指令流单数据流控制部分:各处理器以异主存模块:多个至少是不实际各级全面并行多处理机系约◆按处理机的数量进行分类:单处理系统(一个处理单元和其他设备集成)、并行处理系统(两个以上的处理机互联)分布式处理系统(物理上远距离且松耦合的多计算机系统)
阅读全文
摘要:软考复习 计算机硬件组计算机的基本硬件系统由运算器、控制器、存储器、输入设备和输出设备5大部件组成运算器、控制器等部件被集成在一起统称为中央处理单元(Central Processing Unit,CPU)。CPU是硬件系统的核心,用于数据的加工处理,能完成各种算术、逻辑运算及控制功能。◆存储器是计
阅读全文
摘要:mybatis的应用能大大简化我们编写程序的代码并提升效率。 package com.aurora.mybatis.test; import com.aurora.mybatis.mapper.ParameterMapper; import com.aurora.mybatis.pojo.User;
阅读全文
摘要:根据相关的教程,编写了hbase增删改查的几个相关的api,通过这几个api已经可以在hbase实现初步的增删改查的操作了 完成了HBaseDDL和HBaseDML的初步的编写 具体来讲,在HBaseDML中实现了四个方法:1.插入数据 2.读取数据 3.扫描数据 4.删除数据 在HBaseDDL中
阅读全文
摘要:手机如何投屏到电脑 首先对电脑设置: 一、在笔记本上使用键盘快捷键【win+i】打开Windows设置菜单,在菜单列表中选择【系统】选项 二、如果电脑是第一次投屏可以按以下进行操作: 选择“开始”>“设置”>“系统”>“投影到此电脑”。 在“添加‘无线显示器’可选功能投影到此电脑”下,选择“可选功能
阅读全文
摘要:8. 使用 Hive 进行大数据查询 概述 Hive 是构建在 Hadoop 之上的数据仓库工具,用于处理大数据查询分析。本文将介绍如何使用 Hive 进行基本的 SQL 查询操作。 内容 Hive 的基本概念和架构 创建 Hive 表 加载数据到 Hive 表 执行 SQL 查询 代码示例 --
阅读全文
摘要:7. HBase 基本操作 概述 HBase 是一个分布式、面向列的 NoSQL 数据库,适用于存储非结构化或半结构化数据。本文将介绍如何使用 HBase Shell 进行基本操作。 内容 HBase 数据模型 使用 HBase Shell 进行增删改查操作 HBase 表设计注意事项 代码示例 #
阅读全文
摘要:6. 使用 Spark Streaming 实时处理数据 概述 Spark Streaming 是 Spark 生态系统中的流式数据处理组件。本文将介绍如何使用 Spark Streaming 实现实时数据处理。 内容 Spark Streaming 的基本概念 从 Socket 数据源读取数据 实
阅读全文
摘要:5. Spark SQL 与 DataFrame 基本操作 概述 Spark SQL 允许我们使用 SQL 查询操作处理大数据。本文将介绍如何使用 Spark SQL 和 DataFrame 进行基本的数据查询和分析操作。 内容 Spark SQL 和 DataFrame 概述 创建 DataFra
阅读全文
摘要:4. Spark 基础:RDD 操作 概述 Spark 是一个快速大数据处理框架,具有强大的内存计算能力。本文将介绍 Spark RDD 的基本操作,包括创建、转换和行动操作。 内容 RDD 概念 创建 RDD:从集合或外部数据源 RDD 转换操作:map、filter RDD 行动操作:colle
阅读全文
摘要:3. 使用 MapReduce 实现词频统计 概述 MapReduce 是 Hadoop 用于处理大规模数据的核心编程模型。本文将通过 MapReduce 代码实现简单的词频统计任务。 内容 MapReduce 工作原理:Mapper 和 Reducer Hadoop 项目结构 MapReduce
阅读全文
摘要:2. HDFS 基础操作 概述 Hadoop 分布式文件系统(HDFS)是 Hadoop 的核心组件之一。本文将介绍 HDFS 的基本操作,如文件上传、下载和删除。 内容 HDFS 的架构介绍 HDFS 文件操作命令 常用 HDFS Shell 命令 代码示例 # 上传文件到 HDFS hdfs d
阅读全文
摘要:1. Hadoop 集群搭建与配置 概述 Hadoop 是大数据处理框架,适用于分布式存储和处理大规模数据。本文将介绍如何搭建一个简单的 Hadoop 集群,包含基本的配置步骤和注意事项。 内容 Hadoop 架构概述:HDFS、YARN、MapReduce 环境要求:Java、SSH、Linux
阅读全文