InfoQ

News

Aster In-Database MapReduce

作者 R.J. Lorimer, 翻訳者 編集部 投稿日 2008年10月2日 午後12時3分

コミュニティ
Java
トピック
データベース設計,
エンタープライズアーキテクチャ,
フォールトトレランス,
クラウドコンピューティング,
プラットフォーム
タグ
データベース,
MapReduce

アスター・データ・システム社(リンク)はこのほど、同社のnCluster(リンク)データベースの構成要素であるAster In-Database MapReduce(リンク)を発表した。

MapReduceについては、InfoQでも長時間議論がなされてきた(参考記事1・英語)(参考記事2・英語)。これは、元々はGoogleのエンジニアたち(リンク)によって膨大なデータセットを処理するスケーラブルなアプローチとして紹介されたプログラミングモデルである。


アスター社はnClusterデータベースを超並列処理型(MPP)データベースであるとしている。nClusterの並列構造は同社のウェブサイトで以下のように説明されている。

Aster nClusterは、3つの異なるノードクラス(クイーンおよびワーカー、ローダー)からなる独自の重層的なnCluster構造上に構築されています。この3層設計は分析処理に対して明確に役割を分離し、これをカプセル化します。各層は作業負荷の特性に対応して個別にかつ追加的に変化させることができます。特性とは、必要に応じて、キャパシティを付加(ワーカー)、帯域幅をロード(ローダー)、同時処理(クイーン)することを指します。

Aster nClusterに実装されたMapReduceによって、データベース内のMapReduce計算の実行が同じ構造を使ってできることになる。

標準SQL照会のための超並列実行環境と同様、Aster nClusterは、並行データ分析とデータベース内変換のためのフレキシブルなMapReduce機能を実施する機能を加えています。Aster nCluster In-Database MapReduceの各機能は、シンプルで記述しやすく、SQL文内にシームレスに統合されています。これらは基礎となるデータを処理し、インプットをするために、SQL照会に依存しています。この機能は、こうした入力データを手続き的に処理し、SQL照会にさらに消費される、あるいはデータベース内のテーブルに書き込めるようなアウトプットを出すことが可能です。

SQL/MRは、アスター社が導入した特別なSQL MapReduce機能のライブラリである。nClusterプラットフォーム内でMapReduceアルゴリズムを呼び出すために使うことができる。アスター社は、ポリモーフィック型機能とダイナミックタイピングをサポートし、MapReduce calculationsは、JavaやPython、C++などの言語で開発が可能だ。


In-Database Map ReduceとnClusterに関する詳しい情報は、アスター・データ・システム社のウェブサイトで入手可能(リンク)

原文はこちらです:http://www.infoq.com/news/2008/09/aster_mapreduce

ブックマーク
digg+,
reddit+,
del.icio.us+,
dzone+,
Hatena

No comments

返信

ジャンル別一覧

Agile2008 チーム参加レポート - 動機/準備編

筆者はアジャイルソフトウェア開発についての年に一度の国際会議であるAgile2008に初めて参加してきました。今年の日本からの参加者の数は14名にも及び、発表者は5名、受け持ったセッションは8つに及び、例年にない活躍を見せました。なぜ今年のAgile2008では、これほど多くの日本人が参加し発表に至ったのか? そのレポートをお届けします。

Javaトラブルシューティングメルマガ総集編 2008/08~09

エスエムジーでは、Java全般を対象にしたトラブルシューティングサービス「JaTS」を提供しています。この記事では、前回に引き続き、JaTSにて蓄積したトラブル事例とその解決ノウハウの一部をお送りしている「Javaトラブルシューティングメールマガジン」(JTSMM)の総集編として、過去2ヶ月のトラブル事例と追加情報をダイジェストとして提供いたします。

モデル駆動アプローチがうまく機能しない(しなくなる)8 つの理由

この記事では、モデル駆動アプローチがうまく機能しない、または機能しなくなることによって期待した結果が実現できなくなる 8 つの理由について書きたいと思います。

消費者主導契約を使ったサービス指向開発

この論文では、組織のサービス開発能力改善を目指した実用的な提案をします。

スケーラビリティの構築とパフォーマンスの達成:バーチャルパネル

InfoQ.com向けのこのバーチャルパネルでは、大企業やプロジェクトからスケーラビリティやパフォーマンスの著名人を招待し、みんなが夢に描いているような結果を達成するための秘密を明かしてもらいました。

アジリティのためにコンポーネントチームより機能チームを選ぶ

Craig Larman氏とBas Vodde氏は、どのように、そして、なぜ機能チームがうまくいくのかを説明し、この主要な組織の変化が価値あるものであることを主張します。

仮想化とセキュリティ

仮想化にはたくさんの利点がありますが、かと言って、その上に実装するアプリケーションのセキュリティをないがしろにしてはいけないのです。

Rubyのオープンクラス:猿のようにパッチを当てない方法

最近リリースされたRuby 1.8.7のプレビューリリースをウオッチしていたRails開発者はすぐに1.8.7プレビュー1に関してあることに気がつきました。それは、1.8.7プレビュー1がRailsを破壊してしまうということです。