InfoQ

新闻

Aster发布应用于数据库的MapReduce

作者 R.J. Lorimer 译者 张龙 发布于 2008年9月26日 上午9时8分

社区
Java
主题
云计算,
容错技术,
平台,
数据库设计,
企业架构
标签
MapReduce,
数据库

Aster Data Systems最近发布了应用于数据库的MapReduce,这是其nCluster数据库的一个组件。

InfoQ已经详细 介绍了MapReduce,它最初是由Google工程师引入的一种编程模型,旨在提供一种可伸缩的方法来处理大数据集。

nCluster是由Aster推出的一个高并行处理(MPP)数据库。其网站这样描述了nCluster的并行架构:

Aster nCluster构建于独特、多层的nCluster架构之上,它包含三种独立的节点类:Queens、Workers及Loaders。针对分析处理,该三层设计将角色完全隔离并封装起来。每层都可以独立扩展以响应负载变化——当需要时扩充容量(Workers)、加载带宽(Loaders)或者执行并发(Queens)。

Aster nCluster提供的MapReduce实现利用相同的架构,为数据库中执行MapReduce计算留有了余地:

就像针对标准SQL查询的高并发执行环境一样,Aster nCluster为数据库中的并行数据分析及传输实现了灵活的MapReduce函数。Aster nCluster应用于数据库的MapReduce函数很容易编写,而且可以与SQL语句无缝集成。它们依靠SQL查询来操纵底层数据并提供输入。该函数可以操纵输入数据并提供输出,而这些输出又可以被SQL查询使用或者写到数据库表中。

SQL/MR是由Aster引入的一个特殊的SQL MapReduce函数库,可在nCluster平台中用来调用map-reduce算法。Aster支持多态函数和动态类型,同时MapReduce计算可用Java、Python、C++等语言开发。

请访问Aster Data Systems站点以了解有关应用于数据库的Map Reduce及nCluster数据库的更多信息。

查看英文原文:Aster In-Database MapReduce

深度内容

和Google互补的搜索引擎Wolfram|Alpha

Wolfram|Alpha与Google究竟是什么关系,Wolfram|Alpha自己是如何定位的?Wolfram|Alaph在多大程度上是语义网搜索呢?InfoQ中文站就等等这些问题采访了Wolfram研究公司中国区商务经理王翔。

SOA契约成熟度模型

本文说明了所推荐的契约版本管理设计策略是如何与SOA成熟度模型发生联系的。文章目的是为实现版本管理和可组合性提供一个路线图。

数据服务简介

Vijay Narayanan在这篇文章中对数据服务的几个方面进行了介绍,它们都是SOA实践者和数据架构师感兴趣的内容。本文对数据服务的几个方面进行了介绍,包括需求定义,基本原理和好处、范围、开发以及消费模式。

分块云计算

在本文中,Jimmy Nilsson描述了一种他在过去数年间观察到的一种正在缓慢成长的架构风格,他把这种风格称为“分块云计算”。

豆瓣网技术架构变迁

罗马不是一天建成的,豆瓣的技术架构也是随着用户规模的增长一直在持续变化中。在本次演讲中,豆瓣的首席架构师洪强宁将与大家一起分享从上线时的单台服务器架构开始一直到现在的豆瓣架构变迁历程。

融合思想:深入探索S#arp架构

Billy McCafferty展示了S#arp架构,它在ASP.NET MVC框架的基础上,荟萃了当今的最佳实践,应用在ASP.NET Web应用程序的架构设计中。

王雷谈开源以及新兴市场计划

中国作为新兴市场中的新兴市场,是Sun在美国之外实施SSE(SUN Startup Essentials)项目重点关注的地区。在QCon Beijing 2009期间,InfoQ中文站有幸对此项目的负责人王雷先生进行了采访,探讨了关于开源、新兴市场、SSE等话题。

使用HTML5构建下一代的Web Form

HTML5 是由 WHATWG发起的,最开始的名称叫做Web Application 1.0,而后这个标准吸纳了Web Forms 2.0的标准,并一同被W3C组织所采用,合并成为下一代的HTML5标准。