摘要:# 第一种: Local 方式启动 Spark cd /export/server/spark bin/spark-sql --master local[2] --conf spark.sql.shuffle.partitions=2 # 第二种:Standalone 方式启动 Spark cd /
阅读全文
摘要:01图层的概念 02图层的种类 03图层编辑工具 04图层混合选项 05调整图层 06图层混合模式 07图层筛选按钮 08图层锁定工具
阅读全文
摘要:ref和reactive reactive在修改响应式对象的时候,要用Object.assign(car,{brand: 'xiaomi' , price : 20}) 需要一个基本类型的响应式数据,必须使用ref 需要响应式对象,且层级不深,ref,reactive都可以 需要一个响应式对象,层级
阅读全文
摘要:use MuZhaoDi db.grade.insertMany([ { courseName: "ComputerNetwork", score: 99, teacher: "HuYingXin", examDate: "2024/6" }, { courseName: "MaoGai", sco
阅读全文
摘要:start-all.sh nohup /export/server/apache-hive-3.1.2-bin/bin/hive --service metastore & nohup /export/server/apache-hive-3.1.2-bin/bin/hive --service h
阅读全文
摘要:<script setup lang="ts"> import {computed, onMounted, ref} from "vue"; import {getScjhService, getWorkerService, getProcessService, addWorkInfoService
阅读全文
摘要:<script setup lang="ts"> import {computed, ref} from "vue"; import {getScjhService,getWorkerService,getProcessService,addWorkInfoService} from "@/api/
阅读全文
摘要:先把工具类下载下来,直接拖进去: /** * Base64 工具类 */ public class Base64Util { private static final char last2byte = (char) Integer.parseInt("00000011", 2); private s
阅读全文
摘要:package com.example.mesweb; import com.example.mesweb.utils.DatabaseConnection; import javax.servlet.ServletException; import javax.servlet.annotation
阅读全文
摘要:# Spark ## 1.1 ***用于大规模数据处理的统一分析引擎*** **Spark的架构角色**: *资源管理层面:* Master:集群资源管理 Worker:单机资源管理 *任务运行层面:* Driver:单个任务的管理 Executor:单个任务的计算 Spark解决的问题: 海量的数
阅读全文
摘要:## Hive ### MetaStore #### 前台启动 ~~~cmd /export/server/apache-hive-3.1.2-bin/bin/hive --service metastore ~~~ **会一直占据前台,按下Ctrl+C关闭** #### 后台启动 ~~~cmd n
阅读全文
摘要:HDFS集群-分布式存储 YARN集群-资源管理调度 MapReduce-计算框架(代码层面的组件) ## Hadoop集群的启停命令(只在node1中操作即可) ### HDFS集群 ~~~cmd start-dfs.sh stop-dfs.sh ~~~ ### YARN集群 ~~~cmd sta
阅读全文
摘要:# 解压安装包 tar -zxvf /export/server/spark-2.4.5-bin-hadoop2.7.tgz # 创建软连接,方便后期升级 ln -s /export/server/spark-2.4.5-bin-hadoop2.7 /export/server/spark # 如果
阅读全文
摘要:start-all.sh stop-all.sh nohup /export/server/apache-hive-3.1.2-bin/bin/hive --service metastore & nohup /export/server/apache-hive-3.1.2-bin/bin/hive
阅读全文
摘要:# 在 node1 上启动整个 Hadoop 集群 start-all.sh # 启动 MRHistoryServer 服务,在 node1 执行命令 mr-jobhistory-daemon.sh start historyserver # 启动 Spark HistoryServer 服务,,在
阅读全文
摘要:定义 UML(Unified Modeling Language)即统一建模语言,是一种用于软件系统分析、设计和可视化建模的标准语言。它为软件开发过程中的不同阶段提供了一种通用的、直观的方式来描述软件系统的结构、行为、功能以及与用户和其他系统之间的交互等诸多方面。 UML的构成要素 事物(Thing
阅读全文
摘要:import org.apache.hadoop.hbase.mapreduce.TableMapper; import org.apache.hadoop.io.LongWritable; import org.apache.hadoop.io.Text; public class RowCoun
阅读全文
摘要:类图: classDiagram class TravelContext { - TravelStrategy strategy + setTravelStrategy(TravelStrategy) + executeTravel() } class TravelStrategy { <<inte
阅读全文
摘要:类图: ```mermaid classDiagram class Item { <<interface>> +accept(Visitor visitor) } class Book { -String title +getTitle() +accept(Visitor visitor) } cl
阅读全文