2016美国QCon看法:在Beam上,我为什么说Google有统一流式计算的野心

  • 时间:
  • 浏览:1
  • 来源:5分排列3APP下载_5分排列3APP官方

编者按:流式计算(Stream Processing)在经历了若干年的发展就让 ,可能性有了比较完整性的生态,如开源的Storm, Flink, Spark等,未开源的如Google的DataFlow,几乎每个巨头完整性都是当时人的流式计算系统。生态虽繁荣但分散,各个平台之间也是互不兼容的,另一一两个平台上写的应用程序不能自己移植到另外另一一两个平台,那先 领域问題加上上Google大一统流式计算的野心催生了Apache孵化器的新项目Beam。

         Google是最早实践大数据的公司,目前大数据繁荣的生态很大一每项完整性都是归功于Google最早的几篇论文,这几篇论文早就了以Hadoop为开端的整个开源大数据生态,而是很可惜的是Google内部人员的那先 系统是无法开源的,在开源生态和云计算兴起就让 ,Google也是受够了闭源的痛苦,据说为了给用户提供HBase服