【直击美国云计算】如何做Hadoop、流处理框架等技术的采用选择
摘要:针对特殊的使用场景,我们往往需要选用不同的开发工具。比如Hadoop适用于批处理,但是在更需要适时处理的情况下,我们一般不会选择类似Hadoop这样的工具,Damian Black分享了从数据分析中获得更多价值的方法。
经过近几年的发展NoSQL数据库逐渐火了起来,但是这并不意味开发者就要放弃原有的可以直接从巨量数据中获得真知的SQL查询。
请访问原文查看视频(需翻墙)
SQLstream CEO Damian Black在GigaOM的 Structure会议上带来了他们的方法,当提到流,Black认为,流就是能对不停的数据进行处理,并且给出最后结果。
这个方法比Hadoop以及传统的关系型数据库有着更低的延时,Black说道:“虽然如此,但是系统对硬件和基础设施的需求同样比它们低,并且支持处理非常大体积的数据(同样不需要很高的开销)。”
Black还指出,这些选项不一定就需要针对相同的用例,当然他们也可以被认为是互补的。“流处理已经被作为更多的插件添加”,Black补充到。(更多详情请访问原文查看会议视频)