Hadoop将增强SQL 而不是取代

 　  北大青鸟武汉宏鹏光谷校区：Hadoop将增强SQL 而不是取代

       Hadoop几乎成了非关系型数据模型的代名词，而SQL似乎被渐渐打入冷宫。商业Hadoop供应商MapR的CEO John Schroeder则认为，Hadoop将增强SQL，而不是取代之。

　　上个月，老牌IDC分析师Dan Vesset曾预言，Hadoop将成为现代数据中心的一个标准组件。到2015年，Hadoop市场将步入成熟，而我们今天所熟知的主要参与厂商可能将不复存在。MapR是一家商业Hadoop的供应商，其名称是受Hadoop的MapReduce软件架构的启发，并且是Vesset的收购目标清单上的公司之一。

　　所以你可以预料到MapR的CEO John Schroeder的预言并不包括他自己的公司。但是Schroeder至少发出了一个容易引起争论的论调：相对于1992年的数据库市场，2012年该市场的不同在于客户的新发现能力导致了客户倾向由卖方主导变成了抑制卖方。

　　可移植性

　　“多个厂商间的竞争可以产生更好的结果，”Schoeder表示，“如果你看看九十年代初，Oracle、 Sybase和Informix都在为建立的关系型数据库而鏖战，他们都是基于ANSI标准的SQL。我认为Hadoop的接口相比于关系形数据库更加标准和便携。”

通过与EMC达成战略合作伙伴，MapR已经迅速进入市场中的阵营。Schoeder暗示，这种伙伴关系就像为MapR上了份商业保险。

　　更重要的是，他认为，Hadoop的API的严格规范，开发相关组件比关系型数据库更加容易。“客户在分布式数据库之间移植的转换成本相当低”，他告诉我们。他确信，只要Cloudera、Hortonworks这些与MapR类似的公司一起保持合作，保持彼此间的可以移植性和兼容性，大数据市场将迎来更多创新。

　　“我在想，就好比航天技术需要大量的供应商一样。”Schoeder表示，这样，如果一些开发者用HBase的接口，其它人用Hive、Pig，或其它更多的选择，只要坚持MapReduce的API，应用程序仍然可以在各个分布系统里移植。

　　beta或许已经结束

　　Schroeder预见，Hadoop经历了实验室阶段，已经在企业中部署，终将承担关键性的任务。但事实并非如此?大量SQL数据库引擎应用在关键业务中，并没有成为Hadoop爆发的导火索。

　　“非结构化的数据系统并不适合传统的数据仓库，这种情况非常普遍。”Schroeder确信。“Hadoop在几年前的状态真的不是一个可靠的计算和数据存储。在18个月前，如果你在Hadoop里存储数据，那就意味着丢失;如果你正在运行的生产应用程序，你会遇到崩溃，那个时候Hadoop还没有足够成熟。这限制了Hadoop的商业化。”

　　Schoeder表示，作为商业的Hadoop供应商，我们将提供用户在SQL系统所提供的所有功能，保证商业的连续性和保护，这就是变化。

　　SaaS是凶是吉?

　　作为云供应我们努力商探索更多的客户，中小型企业愿意采用云供应商(Amazon弹性MapReduce系统和DynamoDB)提供的远程的数据存储和管理，而不是自己部署。这会对像MapR这样的企业构成商业威胁?

　　不会的。只要给MapR一个机会进入到这些的核心就足够了。John Schroeder举例说，给五角大楼提供国防设备，将通过承包商销售MapR的产品。也许这些客户不认同Hadoop，但谁会在乎呢?也许IDC的Vesset说的不完对，的光环可以褪去，但其背后的技术公司至少有一个可以继续生存。

　　增强，而不是被取代

　　早期，所谓的“NoSQL”运动的成功目标是如何尽快让非结构化数据模型被企业采用。Schroeder认为，Hadoop和大数据系统能否成功的关键因素在于，像我一样的开发者能否尽快充分利用超越SQL更大级别的扩展能力的应用程序。

　　“我在这个市场工作两年半，起初我没有看到客户用Hadoop替换自己的数据仓库。如今，市场正在被拉动。”

　　Schroeder举例说，一家信用卡公司需要建立欺诈检测系统。传统的SQL数据仓库是现成的，也可以工作的足够好。但是它没有足够的数据过滤系统，不能准确的捕捉和筛选可能会导致欺诈的序列。因此，作为更加明智的策略，他建议建立补充的原始交易数据流的数据库，也许要记录几年的数据后才能通过Hadoop产生价值。开始，当一个潜在的欺诈事件在SQL中是孤立的，但是通过快速分析可以通过Hadoop发现。显然，建立分析欺诈事件模型，对SQL和Hadoop双方都有利。