BT

HortonworksがStinger.nextのロードマップを発表,Apache HiveによるHadoopスケールのSQL提供へ

| 作者: Adam Berry フォローする 0 人のフォロワー , 翻訳者 吉田 英人 フォローする 0 人のフォロワー 投稿日 2014年10月15日. 推定読書時間: 2 分 |

原文(投稿日:2014/09/25)へのリンク

Apache Hive 0.13で提供されたStinger initiativeに続いて,Hortonworksは,完全なACIDトランザクション,サブセカンド(秒以下)で動作するクエリエンジン,充実度を高めたSQL 2011の解析サポートを提供する,Stringer.nextのロードマップを策定した。これらはすべて,Hiveによって"SQLサポートの速度,スケール,範囲を拡張"するという,同社の目標に向けてのものだ。

Stringer.nextの開発はすべて,Hiveコミュニティによって主導されている。第1フェーズで提供されるトランザクションは,2014年末にはユーザの手元に届く予定である。完全なACIDトランザクションは,現行のWORM(Write-Once-Read-Many)モデルに比べて大きな進歩であり,周期的な更新を要件とするユースケースへの道を開くものだ。

最初のStinger initiativeでは,YARNの活用で100倍という速度向上を実現した。Stinger.nextの計画においても,処理速度は主要な機能である。サブセカンドのクエリは,2015年前半の第2フェーズにスケジュールされている。Apache Tezと,LLAP(Live Long And Process)と呼ばれる新技術をベースに構築されて,複数のノード上でオプションプロセスとして動作する,新たなハイブリッドエンジンが使用される予定だ。LLAPでは,効率的なデータキャッシュと低レイテンシの処理を採用することによって,高速なレスポンス時間を実現する。

最終フェーズでは非同一joinやset関数,インターバルタイプやサブクエリを追加して,HiveのSQL機能を拡張する予定だ。今回のサブセットは,SQL 2011で頻繁に利用されている機能を選択したものだが,ユーザからの要求があれば,さらに多くの機能が追加される可能性もある。

他にもいくつかの機能が,コミュニティによって約束されている。機械学習タスク用のHive on Sparkや最新データを処理するためのHive Streaming Ingest,地理条件を越えたクエリのサポート,マテリアライズドビュー,ユーザビリティとデプロイメントの改善,といったものだ。

HadoopにおいてSQLを提供するのはHiveだけに限らない。ClouderaのImpalaIBMのBig SQL,さらにはApacheのPhoenixDrillなど,プロプライエタリあるいはオープンソースの競合相手には枚挙にいとまがないほどだ。SQLジョブがHadoopデータのユースケースとして理想的なのか,あるいは,その人気はTabelauやInformaticaのような既存のBIツールにビッグデータのスケールを実現するためのものなのか,今はまだ明らかではない。

この記事に星をつける

おすすめ度
スタイル

こんにちは

コメントするには InfoQアカウントの登録 または が必要です。InfoQ に登録するとさまざまなことができます。

アカウント登録をしてInfoQをお楽しみください。

あなたの意見をお聞かせください。

HTML: a,b,br,blockquote,i,li,pre,u,ul,p

このスレッドのメッセージについてEmailでリプライする
コミュニティコメント

HTML: a,b,br,blockquote,i,li,pre,u,ul,p

このスレッドのメッセージについてEmailでリプライする

HTML: a,b,br,blockquote,i,li,pre,u,ul,p

このスレッドのメッセージについてEmailでリプライする

ディスカッション

特集コンテンツ一覧

.NETの派生を理解する

Wayne Citrin 2018年7月18日 午前3時44分

ASP.NET Core - シンプルの力

Chris Klug 2018年6月4日 午前3時26分

InfoQにログインし新機能を利用する


パスワードを忘れた方はこちらへ

Follow

お気に入りのトピックや著者をフォローする

業界やサイト内で一番重要な見出しを閲覧する

Like

より多いシグナル、より少ないノイズ

お気に入りのトピックと著者を選択して自分のフィードを作る

Notifications

最新情報をすぐ手に入れるようにしよう

通知設定をして、お気に入りコンテンツを見逃さないようにしよう!

BT