BT

如何利用碎片时间提升技术认知与能力? 点击获取答案

文章:分布式计算开源框架Hadoop介绍

| 作者 岑文初 关注 2 他的粉丝 发布于 2008年8月5日. 估计阅读时间: 1 分钟 | CNUTCon 了解国内外一线大厂50+智能运维最新实践案例。

Hadoop是Apache开源组织的一个分布式计算开源框架,在很多大型网站上都已经得到了应用,如亚马逊、Facebook和Yahoo等等。本文是Hadoop入门实践三部曲的第一部,主要讲述了What和Why的问题。

什么是Hadoop呢?

Hadoop框架中最核心的设计就是:MapReduce和HDFS。MapReduce的思想是由Google的一篇论文所提及而被广为流传的,简单的 一句话解释MapReduce就是“任务的分解与结果的汇总”。HDFS是Hadoop分布式文件系统(Hadoop Distributed File System)的缩写,为分布式计算存储提供了底层支持。

为什么要使用Hadoop呢?

1、可扩展:不论是存储的可扩展还是计算的可扩展都是Hadoop的设计根本。
2、经济:框架可以运行在任何普通的PC上。
......
......

详细内容,请阅读全文分布式计算开源框架Hadoop介绍


作者介绍:岑文初,就职于阿里软件公司研发中心平台一部,任架构师。当前主要工作涉及阿里软件开发平台服务框架(ASF)设计与实现,服务集成平台(SIP)设计与实现。没有什么擅长或者精通,工作到现在唯一提升的就是学习能力和速度。个人Blog为:http://blog.csdn.net/cenwenchu79

参与InfoQ中文站内容建设,请邮件至editors@cn.infoq.com。也欢迎大家到InfoQ中文站用户讨论组参与我们的线上讨论。

评价本文

专业度
风格

您好,朋友!

您需要 注册一个InfoQ账号 或者 才能进行评论。在您完成注册后还需要进行一些设置。

获得来自InfoQ的更多体验。

告诉我们您的想法

允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p

当有人回复此评论时请E-mail通知我

by 秋天 的蛇

期待在当前的业务模式中找到更多应用场景,使其不断优化和完善。

图太小了,很难看清 by Xue Semon

图太小了,很难看清

期待贵公司具体的应用 by Huang Huang

文章里提到还在考虑是否要采用,希望如果采用了,能够把你们的solution share给大家,看了赤壁上,还在等赤壁下。

Re: 期待贵公司具体的应用 by 霍 泰稳

如果Hadoop能够在淘宝网或者阿里巴巴的系统里面得到应用,无疑对其他的网站是有借鉴意义的,期待应用Hadoop的解决方案。

hadoop by cen wenchu

在阿里hadoop已经得到了比较广泛的应用,特别是对于海量日志分析的工作中。

Re: 期待贵公司具体的应用 by 天色 璎珞

哈哈。。。。我们早就在用这个啦~~~~

赞同 分析问题的方法 by chengmin wu

呵呵 对系统结构的放大与缩小 分诺依曼的体系结构决定了 大致模式的相识

Re: 期待贵公司具体的应用 by Guo Xiaogang

你们公司本就是Hadoop的幕后黑手。

Re: 期待贵公司具体的应用 by 少宁 潘

百度在Hadoop方面应用已经很成熟了。。。

允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p

当有人回复此评论时请E-mail通知我

允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p

当有人回复此评论时请E-mail通知我

9 讨论

登陆InfoQ,与你最关心的话题互动。


找回密码....

Follow

关注你最喜爱的话题和作者

快速浏览网站内你所感兴趣话题的精选内容。

Like

内容自由定制

选择想要阅读的主题和喜爱的作者定制自己的新闻源。

Notifications

获取更新

设置通知机制以获取内容更新对您而言是否重要

BT