摘要:
Confluent作为国际数据“流”处理技术领先者,提供实时数据处理解决方案,在市场上拥有大量企业客户,帮助企业轻松访问各类数据。DataPipeline作为国内首家原生支持Kafka解决方案的“iPaaS+AI”一站式大数据融合服务提供商,在零售、金融、互联网和制造等行业拥有着丰富实践经验和解决方 阅读全文
摘要:
近日,国内领先的“iPaaS+AI”一站式大数据融合服务提供商DataPipeline宣布加入Linux基金会旗下OpenMessaging开源社区,将与OpenMessaging开源社区其他成员阿里、Yahoo、滴滴、Streamlio等,共同推动大数据技术在国际市场的应用与创新,降低企业的投入成 阅读全文
摘要:
庞姬桦女士毕业于北京大学和美国哥伦比亚大学,目前担任PayPal公司消费者风险管理总监,负责通过大数据实现对互联网金融风险的侦测、跟踪、管控和防范。在加入PayPal之前,曾任职于渣打银行(中国)和美国运通公司,具有超过15年的银行风险管理和研发丰富从业经验。 导言 DataPipeline致力于帮 阅读全文
摘要:
胡夕 《Apache Kafka实战》作者,北航计算机硕士毕业,现任某互金公司计算平台总监,曾就职于IBM、搜狗、微博等公司。国内活跃的Kafka代码贡献者。 前言 虽然目前Apache Kafka已经全面进化成一个流处理平台,但大多数的用户依然使用的是其核心功能:消息队列。对于如何有效地监控和调优 阅读全文
摘要:
夏凯 卡内基梅隆大学计算机系毕业,曾供职于Evernote数据团队和微软Bing.com搜索引擎广告部门。回国后作为早期成员加入小红书,先后从事大数据,用户增长,项目和团队管理等工作。 我最初是在美国做搜索型广告。回国之后,加入小红书,做基础的数据服务、数据平台。作为创业团队,最开始想做数据挖掘、数 阅读全文
摘要:
引言:本文来自infoQ架构师电子月刊对DataPipeline创始人&CEO陈诚的约稿。陈诚,毕业于上海交大,留学于美国密西根大学,前Yelp大数据研发工程师,曾就职于美国Google、Yelp 等; 拥有6年多的大数据、计算机算法等实践经验。 朋友圈最近看到一篇文章 ——《IBM沃森错开致命药, 阅读全文
摘要:
导读:传统ETL方案让企业难以承受数据集成之重,基于Kafka Connect构建的新型实时数据集成平台被寄予厚望。 在4月21日的Kafka Beijing Meetup第四场活动上,DataPipeline CTO陈肃分享了DataPipeline是如何基于Kafka Connect框架构建实时 阅读全文
摘要:
导读:技术人员的常态是“左手支持业务签单,右手提升系统性能”,却经常陷入技术和业务该如何平衡发展的困惑?今天,且听一位硅谷牛人分享他的平衡之道。 以个人名誉申请31个国内外技术和产品专利,中国最佳CTO 战略奖,超过20年的互联网业务架构和技术管理经验,曾15年任职于eBay、Yahoo、Netsc 阅读全文
摘要:
引言:2018年7月25日,DataPipeline CTO陈肃在第一期公开课上作了题为《从ETL到ELT,AI时代数据集成的问题与解决方案》的分享,本文根据陈肃分享内容整理而成。 大家好!很高兴今天有机会和大家分享一些数据集成方面的看法和应用经验。先自我介绍一下。我叫陈肃,博士毕业于中国科学院大学 阅读全文