data transfer project google 开源的开放服务数据传送框架

data-transfer-project 更多的是一个标准,提供了核心的组件,同时提供了参考实现,方便
用户将自己的数据在不同服务商之间传递

参考组件

  • data models 定义了数据格式,包含了类型以及元数据
  • adapter 包含了data apdater 以及auth ,data apadter 包含import 以及export
  • task management library 提供系统数据处理的任务处理,一般会包含,限度,分页,故障处理,安全数据存储

参考图

  • 共享模型的意义

 

 

  • adpater 集成

 

 

  • 数据处理

 

 

安全处理

主要定义不同角色的职责

 

 

说明

data-transfer-project 的设计是一个值得参考学习的,在企业数字化转型以及业务数据共享都是不错的模式参考

参考资料

https://github.com/google/data-transfer-project
http://datatransferproject.dev/

posted on   荣锋亮  阅读(213)  评论(0编辑  收藏  举报

相关博文:
阅读排行:
· 全程不用写代码,我用AI程序员写了一个飞机大战
· DeepSeek 开源周回顾「GitHub 热点速览」
· 记一次.NET内存居高不下排查解决与启示
· MongoDB 8.0这个新功能碉堡了,比商业数据库还牛
· .NET10 - 预览版1新功能体验(一)
历史上的今天:
2021-01-15 k6 新的扩展参考开发
2021-01-15 k6 新的扩展开发模式
2021-01-15 gocloc 代码统计算法
2020-01-15 grokdebug 一个方便的grok 调试工具
2019-01-15 src-d engine 强大的git 历史分析工具
2019-01-15 Babelfish 基本试用
2019-01-15 Babelfish 开源通用代码解析服务

导航

< 2025年3月 >
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5
点击右上角即可分享
微信分享提示