摘要：
大家好，我是独孤风，大数据流动的作者。 曾几何时，我在第一次安装JDK环境的时候也遇到了不小的麻烦，当时还有朋友就因为这个环境问题觉得自己根本不是编程的料，选择了放弃。当时有个段子说，“如果不是JDK环境没搞定，我一定是一个编程天才”。权当一笑，但是环境问题确实是个大问题。 开源元数据管理平台Dat 阅读全文
摘要：
大家好，我是独孤风。 开源元数据管理平台Datahub近期得到了飞速的发展。已经更新到了0.10.5的版本，来咨询我的小伙伴也越来越多，特别是安装过程有很多问题。本文经过和群里大伙伴的共同讨论，总结出安装部署Datahub最新版本的部署手册，希望能帮助到大家。 文章较长，建议收藏点赞在看后，再仔细阅 阅读全文
摘要：
大家好，我是独孤风，大数据流动的作者。 最近几个概念频繁出现在大家的视野内。 什么是数据管理，数据治理，数据中心，数据中台，数据湖？ 他们之间又有怎么样的区别和联系呢？ 这几个概念常常让人混淆，今天我们就来详细解析一下。 # 一、数据管理 数据管理是指组织对其整个数据生命周期进行的规划、执行和控制, 阅读全文
摘要：
大家好，我是独孤风，一位曾经的港口煤炭工人，目前在某国企任大数据负责人，公众号大数据流动主理人。在最近的两年的时间里，因为公司的需求，还有大数据的发展趋势所在，我开始学习数据治理的相关知识。今天给大家分享一体化的元数据管理平台——OpenMetadata。 本文档基于官网及个人实践资料整理。后续的文 阅读全文
摘要：
大家好，我是独孤风，一位曾经的港口煤炭工人，目前在某国企任大数据负责人，公众号大数据流动主理人。 在最近的两年的时间里，因为公司的需求，还有大数据的发展趋势所在，我开始学习数据治理的相关知识。 随着互联网热潮的退去，互联网开始由消费互联网向产业互联网转移。这也让大数据开始在传统企业发挥作用。目前数据 阅读全文
摘要：
大家好，我是独孤风，一位曾经的港口煤炭工人，目前在某国企任大数据负责人，公众号大数据流动主理人。在最近的两年的时间里，因为公司的需求，还有大数据的发展趋势所在，我开始学习数据治理的相关知识。 经过一段时间的努力，我也终于通过了**CDMP国际数据治理认证考试。** 离我研究生开学还有两个月的时间，应 阅读全文
摘要：
大家好，我是独孤风，一位曾经的港口煤炭工人，目前在某国企任大数据负责人，公众号大数据流动的作者。 虽然告诉自己要平静，但是当接到EMS录取通知书的那一刻，眼眶还是忍不住有些湿润。今年正好是是东北大学的建校100周年，录取通知书还附赠了小礼物。 ![](https://img2023.cnbl 阅读全文
摘要：
大家好，我是独孤风。 今天我们来聊一下另一个元数据管理平台Apache Atlas。Atlas其实有一些年头了，是在2015年的时候就开源。 相对于Datahub来说，Atlas显得有一些“老”了，社区也远没有以前活跃。 但是，从稳定性和与Hadoop生态的融合度的角度来说，Atlas目前还是无可替 阅读全文
摘要：
前几天，Datahub提供了最新的字段级别数据血缘功能，很多朋友迫不及待想对比一下Datahub的字段级血缘与Atlas的区别。 这个时候问题来了，在Atlas收集Hive血缘的时候，由于部分版本问题，没有显示出字段级的数据血缘。这是为什么呢？其实只要做一个简单的修复就可以了，但是知其然也要知其所以 阅读全文
摘要：
大家好，我是独孤风，一位曾经的港口煤炭工人，目前在某国企任大数据负责人，公众号大数据流动主理人，近日公众号粉丝也刚刚突破了万人算是一个小小的里程碑。 看着已经有一万人来关注自己，阅读过自己写的文章。心中还是感慨万千的。所以，借着这个机会，今天这篇文章来聊聊我自己。说起来我大学毕业已经有10年了，这 阅读全文