摘要: Hive是大数据领域常用的组件之一,主要是大数据离线数仓的运算,关于Hive的性能调优在日常工作和面试中是经常涉及的一个点,因此掌握一些Hive调优是必不可少的技能。影响Hive效率的主要有数据倾斜、数据冗余、job的IO以及不同底层引擎配置情况和Hive本身参数和HiveSQL的执行等因素。本文主 阅读全文
posted @ 2020-11-02 11:16 云掣小助手 阅读(380) 评论(0) 推荐(0) 编辑
摘要: 有一天开发同学反馈线上业务库中有一条SQL执行很满,每次几乎要跑1分钟才结束,希望我们帮忙优化一下,具体SQL如下: SQL优化第一步 - 查看执行计划 对于一个SQL的优化,我们的第一步也是最重要的一步就是查看SQL执行计划,SQL执行计划一方面告诉我们SQL具体的处理行为,另外一方面也可以体现每 阅读全文
posted @ 2020-10-29 11:49 云掣小助手 阅读(100) 评论(0) 推荐(0) 编辑
摘要: 接下来上一篇文章《 SQL优化案例(1):隐式转换》的介绍,此处内容围绕OR的优化展开。 在MySQL中,同样的查询条件,如果变换OR在SQL语句中的位置,那么查询的结果也会有差异,在多个复杂的情况下,可能会带来索引选择不佳的性能隐患,为了避免执行效率大幅度下降的问题,我们可以适当考虑使用统一所有对 阅读全文
posted @ 2020-10-27 14:16 云掣小助手 阅读(533) 评论(0) 推荐(0) 编辑
摘要: MySQL是当下最流行的关系型数据库之一,互联网高速发展的今天,MySQL数据库在电商、金融等诸多行业的生产系统中被广泛使用。 在实际的开发运维过程中,想必大家也常常会碰到慢SQL的困扰。一条性能不好的SQL,往往会带来过大的性能开销,进而引起整个操作系统资源的过度使用,甚至造成会话堆积,引发线上故 阅读全文
posted @ 2020-10-22 13:47 云掣小助手 阅读(161) 评论(0) 推荐(0) 编辑
摘要: 背景简介 随着智能化的快速发展及信息通信技术的不断创新,各大企业基于对信息安全,成本等各方面的考虑开始选择上云。作为国内云服务的领军者,阿里云也成为了大家重点关注和使用的云服务之一。上云节省了我们运维人员日常的工作,再也不用担心机房的温度、湿度等一系列问题。只需要关注服务器运行状况即可。大大减少了日 阅读全文
posted @ 2020-10-16 15:21 云掣小助手 阅读(280) 评论(0) 推荐(0) 编辑
摘要: 在这个中秋都和国庆在一起的双节里,我们的小明还在辛辛苦苦的找工作,听说他经历了一段“难忘”的面试。 小明面对着面试官的“层层拷问”,游刃有余的化解了这些难题。 面试官:请问你知道哪些“编排管理工具”? 小明:有Docker平台、Google GKE、Amazon EKS这类的平台。 面试官:那你知道 阅读全文
posted @ 2020-10-10 10:03 云掣小助手 阅读(109) 评论(0) 推荐(0) 编辑
摘要: 运维这份工作似乎总是被人误会~ 修服务器的 接网线的 盯监控的 维护系统的 说啥的都有,平常人都不太知道运维是干啥的 跟小编来探一探云掣MSP服务线运维小哥的实际运维工作? 运维小哥一部分日常工作就是每天担当“警卫”,对上千个客户的业务系统进行“系统巡逻”,还要担当“私人医生”对业务系统进行常规“体 阅读全文
posted @ 2020-09-28 15:34 云掣小助手 阅读(160) 评论(0) 推荐(0) 编辑
摘要: 2020年云栖大会百城汇·杭州站,云掣MSP专场圆满落幕! 本次云栖大会·云掣MSP专场以“数据智能,智能运维”为主题,主要聚焦企业云化转型演进趋势,云上运维全景监控以及云原生云环境下核心系统高可用保障。 呼应本次会议主题,云掣十年磨一剑的一体化运维解决方案在本次会议上隆重发布。云掣科技企业服务总监 阅读全文
posted @ 2020-09-24 10:05 云掣小助手 阅读(266) 评论(0) 推荐(0) 编辑
摘要: 奋哥哥接到业务方线上业务数据库CPU资源告警信息,立马登录业务方阿里云控制台查看具体问题。对于数据库当前正在发生中的问题,我们首先从数据库实时会话信息中尝试抓取有效信息,可以看到该告警实例的会话已经出现堆积状态,大量会话处于"Sending data"状态且从TIME字段可以看到这些会话长时间执行未结束。会话长时间执行表示当前会话一直占用的数据库资源未释放,且堆积会话基本为同一类型的业务SQL,这也就是导致我们数据库资源打高的问题SQL。于是,奋哥哥凭借自己高超的技术解决了这一问题。具体是怎么解决的呢?请看下文! 阅读全文
posted @ 2020-09-23 09:52 云掣小助手 阅读(142) 评论(0) 推荐(0) 编辑
摘要: 2020年9月17日,由杭州云掣科技有限公司携手阿里云,联合举办的云栖百城汇·智能运维·云掣MSP专场在杭州市西溪宾馆顺利召开。 本次大会以“数据智能,智能运维”为主题,汇聚了百余位来自金融、零售、制造、能源、医疗等多个行业的领袖,重量级嘉宾在现场进行精彩分享和多元碰撞,共同探讨数字经济下企业云化转 阅读全文
posted @ 2020-09-19 17:53 云掣小助手 阅读(147) 评论(0) 推荐(0) 编辑