通用型数据库
通用型数据库
张一明说从百度挖人,不是没有道理。
因为最近的确传出了一些动静。
百度搞了一年的“金字塔”项目好像要搁浅。
这要从科技发展的历史说起……
在互联网没发展起来,数据量很小的时候,大家使用数据库来进行数据分析。当数据量增大到一定程度的时候,传统的方式就不行了,要应用到分布式技术。
百度算是国内最早涉足这个领域的公司之一,跟紫微星差不多。
06年的时候启动了该项目组,利用分布式技术来增加搜索效率,确保搜索响应能够最快最迅捷。
后来,数据量继续增大。
大数据概念兴起。
也就是去年,百度就筹建了一个技术课题小组,要搞国产自研的大数据系统,即金字塔项目。这个时间段,跟微软、亚马逊、雅虎、IBM等硅谷巨头都差不多,几乎是同时启动。
可互联网的变化太快了。
仅过了一年,时局就变了。
由雅虎主导开发的大数据开源产品Hadoop,成了世界科技公司的主流,并利用开源机制,迅速建立起了Hadoop大数据体系。
IBM和雅虎都已经放弃了自研,投身进了Hadoop,包括奥多比、美国在线、MySpace等公司。
开源产品多好啊!
全世界的开发者一起努力,一起改进。相互分享,共同成长。
省时省力不说,还能节约大量的研发经费。
这个时候,百度内部就出现分歧了。
到底要不要跟那些硅谷巨头那样,也投身进Hadoop的怀抱?看目前这趋势,说不定未来几年,亚马逊、微软、Facebook等巨头也要靠拢过去。
依靠开源产品,性价比更高。
可是,国产自主研发的名义,还要不要了?百度过去几年的好名声,很大原因就是来自于科技领域的自主性。
左边,是国家战略;右边,是企业成本。
到底是向左还是向右?
前世,百度还坚持了一段时间,直到09年才把这个团队解散,选择了企业成本。因为当时的团队负责人充满了理想主义,据理力争又充满信心,在百度内部的角力中苦苦挣扎。
这个人是杨振坤。
这一世就不一样了,杨振坤早就被紫微星收入麾下,带队开发分布式数据库了。
没了杨振坤的坚持,百度能坚持多久?
要知道,现在是经济危机。
百度是上市公司,股价跌幅很惨,在投资人那边承受了巨大的压力。在企业开销方面,当然是能省一笔是一笔。
李彦红是个科学家,也有科技情怀,但有一个前提条件,企业要活着。企业赚钱能力差了,管理层不高兴,投资人更不高兴。他又不怎么擅长权谋,一个处理不好,可能就要众叛亲离。
就算李彦红想做,可是管理层不支持,投资人不看好,他想强行拍板,需要极大的魄力才行。
下午,周不器参加了一次技术委员会,就说了这件事。
大家都野心勃勃。
沈向阳、程秉皓、王建、杨振坤等人更是翘首以盼。
“金字塔”是一个充满理想主义的项目。
国产自研的大数据系统,这要是做出来了,绝对是顶天立地的产品。因此,这个项目即便很辛苦,要耗费大量的心血,也吸引去了很多有情怀的技术大牛,要为了理想做出一些成就来。
一旦项目被取缔,那就完了。
等于断送了这些技术精英、科学家们的理想。
结果可想而知。
这些人还能留在百度吗?理想都破灭了,那就是伤心地啊。他们又不愁找工作,下场一定是心灰意冷地集体离职。
而且,就算他们想留下,权斗之下也留不住。
一个技术副总裁要做“金字塔”,另一个技术副总裁要转投Hadoop体系,这是内部的权力竞争。谁赢了,谁就上位成为新的首席技术官了,有点你死我活。
赢家通吃,为了确保自身地位,怎么办?
当然是趁着取缔金字塔项目的机会,把竞争对手的嫡系部队全部裁掉!
要知道,百度为了搞这个金字塔项目,可是把最精英、最核心的技术力量都抽调出来了,才组成这么一个项目组。
一旦项目废止,就会对百度造成巨大的技术人才损失。
紫微星就可以顺势出击,全盘接盘了。
尤其是杨振坤,他的分布式数据库就涉及自研的大数据处理,最需要类似的人才。随着飞天数据库的上线运营,很多缺点也都暴露出来。
单体的数据处理能力的确很强大,可整个系统的协作性、协调性、可扩展性存在缺陷。目前,还只能部署在500台以下的服务器上,还需要更多的技术积累。
对此,许亮杰帮忙解释:“甲骨文做数据库,从研发到成熟,整整用了六年时间。咱们的飞天数据库才两年,还需要更长的时间改进、完善才行。”
沈向阳道:“分布式数据库,是面向未来的数据库,将来一定可以成为数据库市场的主流。”
这话就很明显了。
未来会是主流,现在是非主流。
这年头,还是关系型数据库的天下。
这也是今天技术委员会的重要议题,关于云计算业务要开展的下一个重要项目——云数据库。
周不器本以为自家的飞天数据库都做出来了,稍微魔改一下,变成云数据库,也就行了。
可现实不行。
飞天数据库的诞生时间太短了,目前只是完成了一些基础功能的设计,还有太多的细节没有展开研究。就比如扩展性。强扩展性理应是分布式数据库的一大优势,可目前飞天数据库还没有在这方面研究,扩展性还不如Oracle呢。Oracle能拓展到5000台服务器,飞天有500台就封顶了。还有很长的路要走。
还有更重要的一点,就是兼容性与多样性。
对此,王建博士给出了很精彩地解释——
“飞天数据库,就像是六脉神剑,是最顶级的武功,可未必适合所有人。段誉这种天赋奇才,可以修炼,可资质差的就不行了,就只能学学七伤拳、伏虎拳之类的武功。有的人资质很高,也未必喜欢六脉神剑,乔峰喜欢降龙十八掌,东方不败喜欢葵花宝典,张无忌喜欢九阳神功……谁都不差。这就是多元性。”
“数据库领域五花八门,有各种各样不同样式的数据库,原生多模数据库、时序数据库、图数据库、表格数据库以及各种不同风格的关系数据。就跟武学秘籍一样,世间千千万,不同的人会有不同的选择。”
“紫微云数据库,应该是建一座藏经阁,把这些不同类型的数据库尽可能多地容纳进去,我们自研的飞天数据库,只是其中的一种。云计算平台搭建好以后,会有成千上万家企业进驻,他们不可能都使用飞天数据库。我们要储备到足够多的武功秘籍,才能满足不同的武学爱好者的需求。”
周不器很高兴,觉得他道理讲得很明白。
沈向阳道:“分布式数据库可以代表未来,但不是现在。我们的云计算业务几年之内就能推出,那个时候,也指望不上飞天。当务之急,紫微星还是需要开发出一套成熟稳定的自主可控的关系型数据库,作为云平台上的主数据库。”
王建道:“嗯,要基于MySQL。”随后又对周大老板补充了一句,“这是开源的数据库,缺点很多。可开源这么多年,全世界的开发者已经进行了最大程度地优化。”
杨振坤面色不太自然,有一种被抛弃的感觉。
却也没办法。
飞天分布式数据库的时间太短了,纯粹的国产自研,还有太长的路要走。即便是自家内部使用,也只能是某一个领域。
数据库很重要的一点,就是通用性,要适用于多个场景。可是飞天数据库本身没有兼容性,不能使用很多传统数据库的语法和模型……使用起来就很不方便。
这就像做手机操作系统,要兼容安卓一样。
不兼容,即便技术再强,也只能是小范围内使用,很难大面积推广。依托开源的安卓,则是更大众化。别的企业喜欢,自家员工也喜欢。而且,兼容了安卓,就可以使用安卓的生态系统中眼花缭乱的应用服务了。
这些应用服务,都是无数企业耗费很多年做起来的。
如果都是自研,都自己做,几乎不可能。
也就是说,飞天分布式数据库功能是很强大,技术是很先进,但是只能服务于某一个特殊领域,比如吞吐量极高的金币钱包系统。又或者YikYak要上这个系统,飞天数据库就要专门为YikYak定向开发,为YikYak的需求做定向设计才行。
通用性不足。
紫微星需要再研发出一款通用性的挂在云平台上的数据库。可以依托开源的MySQL,有更强大更丰富的功能。
随便一个新业务,都可以直接上手使用这款数据库。如果使用飞天数据库,那就比较麻烦了,需要为这个业务专门量身设计、量身打造,单独维护、单独升级,这就太影响效率了。
周不器稀里糊涂听了个大概。
基本情况算是了解了。
如果紫微星只做朋友网或者只做微点搜索,那么飞天数据库就可行,一对一专项服务,量身定制,这会是最好的数据库。
可紫微星旗下的业务太多了,覆盖到了方方面面。
飞天的团队就那么二三百人,不可能应付来那么多业务。再加上云计算平台要面向千千万万的企业,每家企业都有不同的数据库需求。
飞天数据库就有点不够用了。
还太嫩太年轻,需要更长的时间来成长、发展才行。
紫微星需要一款通用性的数据库,作为自家业务的主数据库,同时推上云端,作为云计算的主数据库推广给其他企业。
这个通用性数据库,就只能是开源的MySQL。
王建道:“现在,云计算业务有278人,不到280人,最主要的工作就是做云操作系统的设计和基于大数据的开发。如果要上云数据库业务,还要再进250-300人。每年再增加6000万-7000万的开销。”
周不器就一挥手,好笑道:“上百亿都投了,还差这几千万?既然有需要,那就做。老沈,你居中协调一下,看看到底是抽调还是招聘,处理好。云计算是核心战略,没什么可犹豫的,要上就果断上!”
王建博士就很高兴。
杨振坤叹了口气。
大势还是挡不住啊。
跟云计算平台相比起来,飞天数据库就是个小玩意。
周不器道:“当然了,飞天数据库这边也不能停,这也是重点项目,要大力支持。你们不是说了嘛,分布式数据库才是未来。不能总想着弯道超车,要克服困难,从头开始一点一点地搞研究。”
杨振坤表情好看了不少,问道:“那百度那边?”
周不器略作沉吟,“这事不能急。国家要给百度和紫微星发奖呢,说是最近,也不知道具体是哪天,可能是下个月,也可能是下下月,他们的效率啊……不过,在发奖之前,我觉得他们不会终止金字塔计划,这是他们的脸面。等发完奖了,再看看吧。”
杨振坤眉梢一挑,“真有机会?”
周不器笑着说:“机会很大,等金融危机爆发得严重一点,百度股价再跌一些,他们也就扛不住了。李彦红的性格是弱点,就算他能一手遮天也没那个胆魄,他顶不住投资人和管理层的压力。在官方政策、投资人、管理层和个人名声面前,他肯定要有所取舍来做平衡。经济危机之下,活下去是最重要的。”
杨振坤就很高兴,“如果能把金字塔项目的那批技术精英接手过来,飞天数据库的前景就大大增加了。”
周不器很果断的说:“机遇和风险并存。金融危机的趋势已经很明显了,有点挡不住了。别家企业都在避险,我们却要在这里寻找机会。不仅是百度,微软、谷歌、甲骨文、IBM都是上市公司,运营压力都很大。可以去他们的研究院挖人。国内同行那里要克制,去外企挖人要大胆。”