上一页 1 2 3 4 5 6 ··· 14 下一页

2022年3月22日

大数据采集与存储

摘要: 一个完整的大数据项目架构可以分为数据采集层,数据存储层,数据计算层,数据接入层和数据应用层、基础服务层 。 根据大数据项目的分层架构的自底向上的顺序(数据流转顺序),应该关注:数据的采集与存储、大数据计算、大数据监控。 与传统项目开发相比,大数据项目开发具有如下特点 1)数据量大。带来的问题就是资源 阅读全文

posted @ 2022-03-22 20:42 qiaoli 阅读(1173) 评论(0) 推荐(0) 编辑

大数据技术

摘要: 大数据技术 大数据主要涉及到数据的采集、存储、计算和分析、以及管理调度。 数据的采集 数据存储 数据管理调度 数据计算和分析 大数据技术涉及:数据的采集、预处理、和分布式存储、以及数据仓库、机器学习、并行计算和可视化等方面。 对于大数据技术,应用广泛的是以hadoop和spark为核心的生态系统。h 阅读全文

posted @ 2022-03-22 20:41 qiaoli 阅读(1588) 评论(0) 推荐(0) 编辑

大数据监控

摘要: 数据作为大数据系统的核心,需要进行监控,合理的监控与报警策略不但可以帮助我们快速发现和定位故障,而且还可以智能化的预测可能发生的问题。我们可以根据业务的规则制定重点的监控指标,保证数据具备高质量。 在大数据的监控中,对数据质量进行监控是最为直接的。因为从数据使用者的角度来说,高质量的数据是指能够充分 阅读全文

posted @ 2022-03-22 20:41 qiaoli 阅读(1028) 评论(0) 推荐(0) 编辑

数据仓库

摘要: 什么是数据仓库 数据仓库之父比尔·恩门(Bill Inmon)在1991年出版的“Building the Data Warehouse”(《建立数据仓库》)一书中所提出的定义被广泛接受——数据仓库(Data Warehouse)是一个面向主题的(Subject Oriented)、集成的(Inte 阅读全文

posted @ 2022-03-22 20:41 qiaoli 阅读(464) 评论(0) 推荐(0) 编辑

2022年1月21日

linux监控服务器资源以及进程钉钉推送

摘要: https://blog.csdn.net/weixin_44901564/article/details/111994274 https://blog.csdn.net/dingles/article/details/115109643 https://www.cnblogs.com/pzyin/ 阅读全文

posted @ 2022-01-21 19:04 qiaoli 阅读(57) 评论(0) 推荐(0) 编辑

2021年12月14日

Linux添加硬盘和挂载

摘要: 转:https://www.cnblogs.com/myvic/p/6816924.html 1.使用fdisk -l 查看硬盘的详细信息 分析: 2.分区初始化 fdisk /dev/sdb 分析:各个参数的解析 1. 输入 m 显示所有命令列示。 2. 输入 p 显示硬盘分割情形,打印分区表。 阅读全文

posted @ 2021-12-14 13:10 qiaoli 阅读(1252) 评论(0) 推荐(0) 编辑

2021年12月9日

Jmeter命令模式使用介绍

摘要: 原文链接: 1、https://blog.csdn.net/m0_38039437/article/details/108717872 2、https://www.it1352.com/1474032.html 一:Jmeter命令模式运行改变结果实时刷新频率 Jmeter命令模式运行改变结果实时刷 阅读全文

posted @ 2021-12-09 20:57 qiaoli 阅读(215) 评论(0) 推荐(0) 编辑

2021年12月7日

Linux 执行jmeter压测后,查看响应结果的配置

摘要: https://blog.csdn.net/dashenpanguge/article/details/105736678?utm_medium=distribute.pc_aggpage_search_result.none-task-blog-2~aggregatepage~first_rank 阅读全文

posted @ 2021-12-07 11:02 qiaoli 阅读(1126) 评论(0) 推荐(0) 编辑

Linux进程被杀掉(OOM killer),查看系统日志

摘要: https://www.cnblogs.com/duanxz/p/10185946.html 基本概念: Linux 内核有个机制叫OOM killer(Out Of Memory killer),该机制会监控那些占用内存过大,尤其是瞬间占用内存很快的进程,然后防止内存耗尽而自动把该进程杀掉。内核检 阅读全文

posted @ 2021-12-07 11:00 qiaoli 阅读(278) 评论(0) 推荐(0) 编辑

2021年11月25日

mysql常用的字符串函数

摘要: 函 数 功 能 CONCAT(str1,str2,...,strn) 将str1,str2,...,strn连接为一个完整的字符串 INSERT(str,x,y,instr) 将字符串str从第x开始,y个字符串长度的子串替换为字符串instr LOWER(str) 将字符串str中的所有字母变成小 阅读全文

posted @ 2021-11-25 19:53 qiaoli 阅读(182) 评论(0) 推荐(0) 编辑

上一页 1 2 3 4 5 6 ··· 14 下一页

导航