2020-08-15:什么情况下数据任务需要优化?
福哥答案2020-08-16:
[知乎答案](https://www.zhihu.com/question/414367341)
1.数据任务执行过慢,速度不能满足报表需求,例如每小时的报表,执行时间超过1小时了,第二小时的报表任务又来了。
2.占用过多资源,跑这个任务的时候,整个集群的资源全被吃掉了,或者吃掉很多,影响了线上在线正常业务,这就非常需要优化。一般考虑先移出到其他集群,停止对线上业务的影响,之后优化。
3.数据分析准确性出了问题,例如线上业务字段增加了新的类型,例如原来的type字段只有1,2,3,现在增加了新的4,5,6,导致数据分析不够准确,这时候需要针对可能以后业务会扩展的字段类型进行优化。
***
[评论](https://user.qzone.qq.com/3182319461/blog/1597447048)
公众号:福大大架构师每日一题
分类:
福大大架构师每日一题
标签:
大数据
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 从 HTTP 原因短语缺失研究 HTTP/2 和 HTTP/3 的设计差异
· AI与.NET技术实操系列:向量存储与相似性搜索在 .NET 中的实现
· 基于Microsoft.Extensions.AI核心库实现RAG应用
· Linux系列:如何用heaptrack跟踪.NET程序的非托管内存泄露
· 开发者必知的日志记录最佳实践
· winform 绘制太阳,地球,月球 运作规律
· TypeScript + Deepseek 打造卜卦网站:技术与玄学的结合
· AI 智能体引爆开源社区「GitHub 热点速览」
· Manus的开源复刻OpenManus初探
· 写一个简单的SQL生成工具