BT

Novidades O InfoQ vem desenvolvendo uma série de novas funcionalidades para melhorar sua experiência com o site. Confira!

Amazon inicia MapReduce baseado no Hadoop para o EC2

| por Scott Delap Seguir 0 Seguidores , traduzido por Felipe Rodrigues Seguir 0 Seguidores em 07 mai 2009. Tempo estimado de leitura: 1 minuto |

Há tutoriais disponíveis ja faz algum tempo detalhando como rodar o popular Apache Hadoop MapReduce framework no Amazon EC2.  Hoje a Amazon adere de vez ao padrão oferecendo suporte oficial via Amazon Elastic MapReduce.  Da página do produto:

O Amazon Elastic MapReduce automaticamente embute uma implementação do MapReduce framework nas instancias do Amazon EC2, sub-dividindo os dados de um fluxo de trabalho em pequenas partes, de forma que eles possam ser processados (a função "map") em paralelo e eventualmente recombinando os dados em uma solução final (a função "reduce"). O Amazon S3 serve como fonte para os dados sendo analisados e também como destino para o resultado final.

Para o Amazon Elastic MapReduce é cobrado 15% a mais, sobre o valor existente do EC2. A FAQ tem uma lista completa com detalhes de preço e utilização. O blog oficial do AWS também fez a cobertura:

...Processamente no Elastic MapReduce é centralizado no conceito de um Fluxo de Trabalho. Cada Fluxo de Trabalho pode conter um ou mais passos. Cada passo recebe um pacote de dados do Amazon S3, distribui os dados para um número específico de instâncias do EC2 que estajm rodando o Hadoop (aumentando as instâncias se necessário), faz todo o trabalho e então escreve os resultados de volta no S3. Cada passo deve referenciar um código "mapper" ou um "reducer" específico da aplicação (JARs ou código de script para uso via Streaming model). Nós também incluímos o Aggregate Package com suport built-in para várias operações comuns comoSum, Min, Max, Histogram e Count. Você pode fazer várias coisas antes mesmo de começar a escrever códig!

Nós fornecemos tres rotas de acessos distintas para o Elastic MapReduce. Você tem total controle via Elastic MapReduce API, você pode usar as ferramentas de linha de comando do Elastic MapReduce ou você pode apontar-e-clicar na tab Elastic MapReduce no AWS Management Console! Vamos olhar cada um deles...

Dana Gardner do ZDNet especula sobre as implicações da nova oferta da Amazon para o mercado de Business Intelligence.

Avalie esse artigo

Relevância
Estilo/Redação

Olá visitante

Você precisa cadastrar-se no InfoQ Brasil ou para enviar comentários. Há muitas vantagens em se cadastrar.

Obtenha o máximo da experiência do InfoQ Brasil.

Dê sua opinião

HTML é permitido: a,b,br,blockquote,i,li,pre,u,ul,p

Receber mensagens dessa discussão
Comentários da comunidade

HTML é permitido: a,b,br,blockquote,i,li,pre,u,ul,p

Receber mensagens dessa discussão

HTML é permitido: a,b,br,blockquote,i,li,pre,u,ul,p

Receber mensagens dessa discussão

Dê sua opinião

Faça seu login para melhorar sua experiência com o InfoQ e ter acesso a funcionalidades exclusivas


Esqueci minha senha

Follow

Siga seus tópicos e editores favoritos

Acompanhe e seja notificados sobre as mais importantes novidades do mundo do desenvolvimento de software.

Like

Mais interação, mais personalização

Crie seu próprio feed de novidades escolhendo os tópicos e pessoas que você gostaria de acompanhar.

Notifications

Fique por dentro das novidades!

Configure as notificações e acompanhe as novidades relacionada a tópicos, conteúdos e pessoas de seu interesse

BT