首页 微博热点正文

青城山,Google 大数据,新三件套之一:Dremel,南普陀寺

2010年的时分Google宣布了一篇论文,介绍了一个新上海神明电机有限公司的体系Dremel。这个体系声称能供给比M艾蒿茶apReduce更快的查询速度。所以从此敞开了所谓的Interactive Query的阶段。这个体系若青城山,Google 大数据,新三件套之一:Dremel,南普陀寺干年后也就成了Google的BigQu秦江灏ery的后端。

MapReduce的慢其实在这个之前现已被很多次的证明,不管Google内部仍是外部。所以Google内部一向寻求愈加快速的查询的解决方案的尽力从未中止过。Dremel起于2006年,是由新人在Google的Kirkland的办公室,远离总部的当地做出来的。这也是新天启大明咱们在Google比较严重的,对BigData有影响的论文里边第一次没有见到Jeff Deanchn142的姓名。

从我知道的内部消息来看,Dremel是战鹤山英皇数字电影城胜了好多个其他体系最终在Google确立起江湖位置的。有个我知道的老工韩娱之甜品店长程师,从前冲砂暂堵剂作为Dremel te沙罗双树的誓词am的人,从前有段安汇宝时刻的作业便是写从其他的体系的查询言语转化到Dremel,以便它们的application们能够顺畅过渡过来。听说内部差青城山,Google 大数据,新三件套之一:Dremel,南普陀寺不多竞赛的至少有4个。这些竞赛对手的体系们各个都被杀死了,许多也没有留下遗体。有个叫PowerDrill的项目簿本福利,临死前在VLDB发了一篇论文,这算得上是揭露有据可考的仅有的一个。

Dremel刚出来的时分仍是十分小心谨慎的防止和MapReduce抵触的。从很多的宣扬材料和ppt上能够看到,他们出来讲演的时分都会说自己是MapReduce的一个弥补,是为少量到中等规划的数据查询服务的,而MapReduce则用来处理更很多的数据。这种宣扬在Dremel越来越成功,以及FlumeJava差不多把整个MapReduce的team都要收编了的今日就显得剩余了。所以胆肥的Dremel部队现在现已比较少再提自己是MapRe暗夜帝王的甜心宝物duce的有利弥补了。

其实MapReduce慢早就不是什么不知道的问题,Dremel之前的半年微软Cosmos组也打当作interactive query了。当然虽然说是论文宣布半年前,可是Dremel是2006年开端做的,而Cosmo爱的吻痕s在06年连影子都还没有,09年才开端有这个主意。之后由于一些非技术的青城山,Google 大数据,新三件套之一:Dremel,南普陀寺原因,Architect跳去Google做Dremel了更是对此有直接的影响。至于最终论文发出来那是2015年的VLDB,那个时分早就天下大乱,Cosmos通过很多次的Reorg,早现已物是人非了。

提到Drem青城山,Google 大数据,新三件套之一:Dremel,南普陀寺el当青城山,Google 大数据,新三件套之一:Dremel,南普陀寺然要提一个在华青城山,Google 大数据,新三件套之一:Dremel,南普陀寺盛顿大学读了本科的我国俏厨娘不嫁闷将武士 JingJing Long。他是Dremel的前期职工xilly之一,后来成了那个team的manager,再后来又自立门户了。这位算得上是在Google Kirkland里混得适当不错的华人了。此人有一个最大的特色便是历来不说中文,虽然他会说。所以在Google Kirklan汉方豆蔻茶官网d的华人里边赢得了装B华人的美称。

Dremel出来没多久,开源社区,尤其是Hadoop的批发商们都纷繁雀跃而起。Cloudera开端现场铁证第一部做Impala,MapR则做了Drill,Hortonwor执政大明ks说咱们爽性直接improve HIVE好了,所以就有了包含Apache Tez在内的effort。当然依照业界青城山,Google 大数据,新三件套之一:Dremel,南普陀寺人士的观念,这几个都借了Dremel的名罢了,实际上挂羊头我的上司姐姐卖狗肉这个工作不光我国人会,老外也会做。名不正言不顺好像在哪里都讲得通。

版权声明

本文仅代表作者观点,不代表本站立场。
本文系作者授权发表,未经许可,不得转载。