随笔分类 - 大二下 / 暑假
摘要：在安装好SQL SERVER后，系统会自动安装5个用于维护系统正常运行的系统数据库：（1）master：记录了SQL SERVER实例的所有系统级消息，包括实例范围的元数据（如登录帐号）、端点、链接服务器和系统配置设置。（2）msdb：供SQL SERVER 代理服务调度报警和作业以及记录操作员的使
阅读全文
摘要：MapReduce 主要是依靠开发者通过编程来实现功能的，开发者可以通过实现 Map 和 Reduce 相关的方法来进行数据处理。 package com.runoob.hadoop;import java.io.IOException;import java.util.*;import org.a
阅读全文
摘要：Word Count 就是"词语统计"，这是 MapReduce 工作程序中最经典的一种。它的主要任务是对一个文本文件中的词语作归纳统计，统计出每个出现过的词语一共出现的次数。 Hadoop 中包含了许多经典的 MapReduce 示例程序，其中就包含 Word Count。 启动配置好的集群容器：
阅读全文
摘要：部署集群。 首先，要为 Hadoop 集群建立专用网络 hnet ： docker network create --subnet=172.20.0.0/16 hnet 接下来创建集群容器： docker run -d --name=nn --hostname=nn --network=hnet -
阅读全文
摘要：格律诗乐器被誉为中国传统音乐的瑰宝，它融合了音乐、文学和工艺，具有独特的艺术价值。在电视剧《天道》中，我们可以观看到王志文在这一领域的杰出表演，同时也能深入了解格律诗乐器的生产流程和质量控制流程。 格律诗乐器生产流程 原材料准备 格律诗乐器的主要材料包括木材、竹子、金属等。在生产过程中，首先需要精选
阅读全文
摘要：HDFS 集群是建立在 Hadoop 集群之上的，由于 HDFS 是 Hadoop 最主要的守护进程，所以 HDFS 集群的配置过程是 Hadoop 集群配置过程的代表。 使用 Docker 可以更加方便地、高效地构建出一个集群环境。 HDFS 命名节点对数据节点的远程控制是通过 SSH 来实现的，
阅读全文
摘要：单机模式：Hadoop 仅作为库存在，可以在单计算机上执行 MapReduce 任务，仅用于开发者搭建学习和试验环境。 伪集群模式：此模式 Hadoop 将以守护进程的形式在单机运行，一般用于开发者搭建学习和试验环境。 集群模式：此模式是 Hadoop 的生产环境模式，也就是说这才是 Hadoop
阅读全文
摘要：Hadoop Distributed File System，Hadoop 分布式文件系统，简称 HDFS。 HDFS 用于在集群中储存文件，它所使用的核心思想是 Google 的 GFS 思想，可以存储很大的文件。 在服务器集群中，文件存储往往被要求高效而稳定，HDFS同时实现了这两个优点。 HD
阅读全文
摘要：Hadoop 为庞大的计算机集群提供可靠的、可伸缩的应用层计算和存储支持，它允许使用简单的编程模型跨计算机群集分布式处理大型数据集，并且支持在单台计算机到几千台计算机之间进行扩展。 Hadoop 的作用非常简单，就是在多计算机集群环境中营造一个统一而稳定的存储和计算环境，并能为其他分布式应用服务提供
阅读全文
