随笔分类 -  大数据相关

Hibench使用记录
摘要：文档说明 配置与下载等就不做记录了，网上一大堆 这里主要记录hibench的一些并发参数及常用命令 参数说明 配置文件 conf/hibench.conf 点击查看代码 # 数据规模配置文件。可用的价值是小、小、大、巨大、很大和比很大还大的数据。 # 具体的数据大小配置可以在 conf/worklo 阅读全文
posted @ 2022-02-24 09:57 不着陆的牛 阅读(83) 评论(0) 推荐(0) 编辑
Hadoop记录-Hadoop监控指标汇总
摘要：系统参数监控metrics load_one 每分钟的系统平均负载 load_fifteen 每15分钟的系统平均负载 load_five 每5分钟的系统平均负载 boottime 系统启动时间，精确到秒 bytes_in 网络接收速度，单位bytes/sec bytes_out 网络发送速度，单位 阅读全文
posted @ 2022-02-23 15:04 不着陆的牛 阅读(931) 评论(0) 推荐(0) 编辑
大数据基本知识汇总
摘要：1. Hadoop是什么？ Hadoop是存储海量数据和分析海量数据的工具 Hadoop是专为离线和大规模数据分析而设计的，并不适合那种对几个记录随机读写的在线事务处理模式。 2. Hadoop核心概念 Hadoop是由java语言编写的，在分布式服务器集群上存储海量数据并运行分布式分析应用的开源框 阅读全文
posted @ 2021-12-31 09:35 不着陆的牛 阅读(597) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示