Avro和Thrift区别(未完待续)

两者都是优秀的序列化框架;

Avro创造之初是Hadoop之父Doug为了创造一种更加快捷的序列化方案(此时已经有了thrift),用于Hadoop的HDFS的文件序列化问题。

Thrift一个成熟的序列化+RPC的解决方案;也是一种高效传输的方案,代价就是它采用的是静态的IDL的方式,根据定义的接口文件生成stub,放入到项目中;这意味着每次数据结构的变化都会导致项目的重新部署;

说到了序列化框架,就要提一下protocal buffer,google的序列化方案,在谷歌内部使用15年,一直到今天足以说明了他的地位和实用性;令人兴奋的是gogole开源了protocal buffer的rpc的解决方案,就是gRPC,引起了业界震动。

(未完待续)

 

参考:

https://martin.kleppmann.com/2012/12/05/schema-evolution-in-avro-protocol-buffers-thrift.html

《Hadoop权威指南》

posted on 2018-04-05 22:21  张叫兽的技术研究院  阅读(259)  评论(0编辑  收藏  举报

导航