摘要:
前言:最近对数据治理比较感兴趣,于是了解了当前各公司的数据治理解决方案和最佳实践(本文会持续更新)。资源均来自网上,感兴趣可以去看看原文。如果有侵权,请联系我删除。 1、为什么要数据治理 为什么要做数据治理?因为在数据产生、采集、加工、存储、应用到销毁的全过程中,每个环节都可能会引入各种质量、效率或 阅读全文
摘要:
前言:现在从事短视频相关工作,因此还是有必要补齐下短视频相关的基础知识。本文对短视频相关的知识进行了简单梳理总结,后续会持续更新。 一、名次说明 二、视频质量评估 视频质量评估主要分为主观质量评估,以及客观质量评估两种。主观质量评估,例如专家评测、众包测试等形式,最准确,但是费时费钱,难以批量应用; 阅读全文
摘要:
前言:在日常工作中感觉自己一些做事方法思维模式不太高效,因此系统学习下。本书是其中一种思维——决策思维。后续会陆续读读其他思维的书,多学习,多实践,日拱一卒。 既然是做决策,那么我们首先决策下,今天的手头工作该如何开展吧!本书中给的这个建议,我觉得不错。在我们每天上班前先问自己三个问题,再开始工作: 阅读全文
摘要:
前言:之前几篇文章,均未完整的介绍我之前负责的指标多维分析系统,本文再从发展历程、难点挑战等角度完整介绍下。这是这个系列最后一篇了。 本系列文章: 指标多维分析系统(一):基于Mondrian搭建一个千万数据量级的多维分析系统指标多维分析系统(二):基于融合引擎模式的多维分析系统指标多维分析系统(三 阅读全文
摘要:
系列文章: MySQL系列(一):索引篇 MySQL系列(二):日志篇 MySQL系列(三):MySQL中的各种锁你都知道吗? 一、背景 一般的事务隔离级别共有四种,分别对应并发场景下多线程对数据访问的四种方式: 如果通过锁机制,如何实现并发控制了? 若只用锁实现隔离级别会导致写会阻塞读。而大部分业 阅读全文
摘要:
前言:好的架构分层,可以让代码逻辑更清晰,扩展性更好;架构分层统一,与团队来说,也可以使得团队内代码更容易理解和维护; 系列文章: 研发规范系列(一):故障复盘研发规范系列(二):方案评审研发规范系列(三):日志上报研发规范系列(四):架构分层研发规范系列(五):监控上报研发规范系列(六):代码Re 阅读全文
摘要:
现在全民AI大模型,虽然我不是算法工程师,但是作为IT从业者,多少应该了解一下。然而,论文太多,原理太难,那咱们就从实践开始,先实践看效果,再学习研究原理。 1. 存在价值及原因 简而言之:HuggingFace是菜鸟的福音,大佬的舞台,学术与工程的桥梁!平台链接:https://huggingfa 阅读全文
摘要:
现在全民AI大模型,虽然我不是算法工程师,但是作为IT从业者,多少应该了解一下。然而,论文太多,原理太难,那咱们就从实践开始,先实践看效果,再学习研究原理。 1. 存在价值及原因 简而言之:HuggingFace是菜鸟的福音,大佬的舞台,学术与工程的桥梁!平台链接:https://huggingfa 阅读全文