随笔分类 -  数据治理

摘要:数据治理核心保障数据质量监控开源项目Apache Griffin分享数据开发和数据应用创造价值离不开数据的质量,数据质量管理是数据治理重要保障途径,Apache Griffin就是为解决数据质量监控而设计,本篇先了解Apache Griffin定义、特性和架构,然后通过官方提供docker-compose一键部署和体验,通过官网提供批处理和流处理演示操作,最后通过其提供UI管理页面实操一个批处理的数据质量监控示例。 阅读全文
posted @ 2023-06-01 22:59 itxiaoshen 阅读(885) 评论(0) 推荐(0) 编辑
摘要:数据治理之关键环节元数据管理开源项目datahub探索元数据管理在数据治理中非常关键的部分,本篇分享一个现代化元数据管理开源项目datahub,了解其核心功能和概念,进一步理解器其架构和组件,然后从0到1的搭建和使用官方的数据样例演示,最后通过摄取MySQL和ClickHouse的示例打开其探索之门。 阅读全文
posted @ 2023-05-11 23:45 itxiaoshen 阅读(2109) 评论(0) 推荐(1) 编辑
摘要:企业数据治理落地和同行面试基础企业数据治理现状普遍存在缺乏统一的数据视图、安全的数据环境、数据价值管理体系,同时也容易形成数据孤岛,出现数据质量低下常见现象;数据治理不是一蹴而就的而是一项繁杂、长期需要工匠精神和锲而不舍的工作,没有一针顶破天的诀窍,也没有立竿见影的途径。只有将数据治理变成一种常态化机制,形成一种习惯、一种文化、持之以恒、不忘初心、不懈努力,才能达到预期目标。 阅读全文
posted @ 2021-11-14 14:08 itxiaoshen 阅读(905) 评论(0) 推荐(0) 编辑
摘要:数据安全技术落地经验浅谈和分类分级实施数字化经济下企业做数据化转型进行数据开发利用往往是先将原来分散各部门各业务系统的数据(业务数据如互联网用户数据、企业内部数据如人力资源系统、研发生产数据如核心技术或专利等)集中到大数据仓库中,这个集中化数仓安全重要性就非常凸显了,原来如果某个部门业务系统数据发生篡改、破坏、泄露、非法获取、非法利用的安全事件影响的只是局部而现在则是整个企业数据资产层面,可见数据安全已经明确上升到国家安全、整个企业、组织或机构安全的最高层级。随着即将到来个人信息保护法2021年11月1日开始正式执行,至此中国已集齐了《网络安全法》、《数据安全法》、《个人信息保护法》三大安全法律顶层设计并进入全方位实施阶段,三大法律并不是各自独立而是相互结合、相辅相成的,共同构成了中国数据安全的法律保障体系,成为推动我国数字经济持续健康发展的坚实“防火墙”,这也标志着数据安全法制时代正式来临;因此在数字化经济发展时代的企业、组织或机构需要改变传统的“重生产,轻安全”的思维模式,特别是经常踩着数据应用红灯线运营的企业就更加要注意了。 阅读全文
posted @ 2021-10-24 14:12 itxiaoshen 阅读(812) 评论(0) 推荐(0) 编辑
摘要:数字化大时代崛起的数据安全能力框架2021北京网络安全大会,以“经营安全,安全经营”为主题,引领中国企业安全领域的奇安信集团发布多项网络安全产品,奇安信集团副总裁韩永刚大会说到,随着十四五全面展开,数据化已经贯穿经济社会发展的全领域、多层级,成为国家治理经济发展和社会运行的核心驱动力,而数据作为新的生产要素的核心定位也成为数据化过程中最关键的驱动力,国家发展数据化经济提出更高的要求,数据治理先行同步统筹安全和发展,其中奇安信集团发布以数据安全治理为核心的数据安全能力框架2.0和零信任身份安全解决方案动态细粒度访问控制能力和业务应用控制相结合,实现对数据流转的精准控制,做到主体的数字身份可信,行为操作合规以及计算环境和数据实体有效防护,推进数据安全治理产品化、体系化走向一个新的台阶 阅读全文
posted @ 2021-10-04 21:22 itxiaoshen 阅读(1462) 评论(1) 推荐(0) 编辑
摘要:数据安全分类分级剖析数据分类分级管理不仅是加强数据交换共享、提升数据资源价值的前提条件,也是数据安全保护场景下的必要条件。《数据安全法》规定国家建立数据分类分级保护制度,对数据实行分类分级保护,**数据分类分级工作是基础和核心,数据分类分级**是数据使用管理和安全防护的基础,为数据尤其是重要数据制定分类分级制度并依规管理,是实现数据安全目标的重要工作;数据分类分级不仅是数据安全治理的第一步,也是当前数据安全治理的痛点和难点,数据分类分级是非常有挑战性的工作。总结数据分类分级的基本流程包括4个重要的方面 阅读全文
posted @ 2021-09-15 00:09 itxiaoshen 阅读(5068) 评论(1) 推荐(0) 编辑
摘要:数字化转型数据治理先谈数据安全数据安全是大数据产业的发展基石,更是国家安全重要保障;信息化发展是一个新机遇,政府数据的开放共享和数据壁垒的打通,推动双循环发展的新机遇,复杂多变的国际形势让我国科技创新、新型基础设施建设和自主可控关键技术发展迎来新的发展机遇,随着坚定的发展脚步,5G、AI、工业互联网等将改变整个社会实现智能化;其次,目前网络安全形势十分严峻,网络攻击、数据贩卖、技术防范弱、自然灾害等问题大量存在,需要从产品和服务、网络和系统、人员和管理以及应急综合治理等方面进行应对;最后,数据治理需要综合施策,需要国家法律法规、数据源头、监管侧、企业等各方面落实防护责任和开展行动 阅读全文
posted @ 2021-09-10 23:07 itxiaoshen 阅读(631) 评论(0) 推荐(0) 编辑
摘要:数据治理很抽象吗数据治理是当今“大数据”领域里比较热门的话题,数据治理到底是啥?这个其实还蛮抽象的,会蛮偏基础,不像一些数据的业务场景更那么性感,那么容易听得懂,像这块说数据质量,其实大家希望我用数据的时候像一个超市的货架一样,用起来会很方便,像数据架构,它其实就是超市里面的货架,怎么去设计出来;数据标准其实就是我们的蔬菜、水果它的规格是不是统一的;再之后就是数据质量,这个很容易理解,这个就是货架里面的商品当前是否符合我的质量的一些要求;然后元数据我们更多的叫它描述水果、蔬菜这种品种规格;数据生命周期管理也是类似就是我的一些蔬菜和水果的保质期是什么样的;数据安全管理就是不要有人偷,我们把超市里货架的设计其实就把数据治理整个体现简单解释出来了 阅读全文
posted @ 2021-09-05 16:15 itxiaoshen 阅读(150) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示