InfoQ

InfoQ

新闻

我的书签

登录注册 以永久保存书签。

该内容已经被标记书签!

标记书签错误,请重试!

亚马逊以弹性块存储为云提供虚拟存储功能

作者 Scott Delap 译者 孙涛 发布于 2008年8月30日

领域
架构 & 设计,
运维 & 基础架构
主题
云计算 ,
虚拟化 ,
架构
标签
弹性计算集群
今年四月,亚马逊的CTO Werner Vogels宣布为Amazon EC2进行持久存储的开发。持久存储一直是EC2平台的一个薄弱环节。长久以来,服务器实例(server instantces)一直以父节点映像启动,当服务器发生故障或重启时,磁盘会恢复到原有映像。如今亚马逊已经可以利用弹性块存储(EBS)来解决这个问题了。Vogels认为EBS是对亚马逊一系列存储模式的完善和补充,他讲道
我们自信地认为目前正在开发的存储基础设施解决方案对开发人员来说非常有用,它首先专注处理最普遍的存储模式。我们目前有三种高层的模式:
  • 键值对(Key-Value)存储。亚马逊的大多数存储模式都建基于通过主键访问某个值或对象。我们基于这种模式开发了Amazon S3。
  • 简单结构化数据(Simple Structured Data)存储。第二大类存储模式是通过简单的查询接口访问结构化的数据集。这种模式利用快速索引来支持大数据集的高速查找。Amozon SimpleDB支持此种模式。我们发现一个比较普遍的做法是在SimpleDB中存储Amazon S3对象的二级键值,这样查询SimpleDB的结果就是S3中的(主)键。
  • 块(Block)存储。还有多种存储模式,从特殊的文件系统例(如ZFS)到管理自身块存储的应用(比如缓存服务器),再到关系型数据库。Amazon EBS支持这些模式,它能提供用于实现多种存储模式的基本存储块。

亚马逊提供了EBS在价格、耐久性和性能方面的一些细节信息,重点包括:

  • 卷的大小可以介于1GB到1TB之间。
  • 卷的行为跟原始的未格式化的块设备类似。
  • 访问仅限于同一个有效的区域,这个区域类似于数据中心的一个SAN。
  • 一个卷只能同时附属于一个EC2实例。
  • 一个EC2实例可以同时有若干个附属卷。
  • 卷拥有备份于S3中的快照,快照只随着数据的变化而增加。
  • 由于数据复制的关系,整个卷失效的概率随着大小的不同在0.1%到0.5%之间变化,这和普通硬盘4%的失效概率相比有了很大提高。
  • 价格大约是每个GB的硬盘空间0.1美元,每一百万个I/O请求也是0.1美元。
鉴于该报价,一个中等大小的数据库(100GB)在空间上的花费估计是10美元,使用费是26美元。目前已经可以找到在EBS上使用MySQL的指南。Right Scale上还有一篇文章更详细地介绍了许多最佳实践和费用估算的公式。在I/O使用率上,他们有以下的实践经验:

......以下是一些参考数据,我们的主数据库是非常繁忙的,一秒大约处理17个事务,每个月的花费大约是4.4美元。但是对于监控服务器来说,在最近 一次的优化之前,它在一天24小时的运转中大约每秒进行1000次的随机写操作,花费大约是每月250美元!我只能说在大多数情况下,EBS在处理事务方 面花费都不是很大,但是如果你不仔细研究的话它也不是那么便宜......

最后,GigaOM提供了一份商务报告,认为传统数据中心对待这个新生的事物还是应该提高警惕。

查看英文原文:Amazon Brings Virtualized Storage to the Cloud with Elastic Block Storage

深度内容

大规模视频网站的计费与流量管理

本次分享将会就大规模视频网站的计费与流量管理这个话题,从操作层面细细进行讲解和分析,为系统工程师们揭示平日里我们没有关心的另一些内容。同时也希望本次分享能揭示行业中的一些“潜规则”,让互联网行业的流量与带宽管理更为开放与简洁。
本次演讲视频录制于QCon杭州2011

专访Jeffrey Richter:Windows 8是微软的重中之重

Jeffrey Richter以其多本Windows核心技术的经典著作而闻名,同时,他深入掌握微软的.NET等一系列核心技术,2012年1月,Jeffrey Richter在北京接受了InfoQ中文站的专访,谈到Windows 8和WinRT编程,并就异步编程、Windows编程中的可扩展性、性能和安全性方面给出自己的建议。

应用云平台的可用性——从新浪SAE看云平台设计

云计算平台的可用性,相比传统互联网服务而言,更加复杂和困难,也更具有挑战性。本文借助新浪SAE云平台为读者讲述了云平台可用性的定义、如何打造高可用的平台,以及对云计算的用户提出了建议。

JVM定制改进 @ 淘宝

淘宝高度重视Java平台的健康发展,组建了一个团队专注于Java平台的底层部分的性能、功能与稳定性改进;工作主要基于OpenJDK中的HotSpot VM开展,其中一些通用的功能随后也会逐渐反馈给OpenJDK社区。希望能与使用Java平台开发应用的大家交流经验。
本次演讲视频录制于QCon杭州2011

"伤得起"的云计算应用——对云端应用之架构的思考

2011年4月21日至22日是值得云计算从业者纪念的日子。Amazon的IaaS服务出现故障,导致许多商业网站的服务中断,影响非常严重。作为云计算用户,我们需要思考的是,如何保证即便在云服务不可用的情况,我们的应用架构仍然能够屹立不倒?本文正是站在云计算用户的角度试图探讨这一问题。

让交付的速度跟上思考的速度

12人的技术团队,4组刀片服务器,每月20亿的访问量,每日1次准时部署,99.9%的可用性。这可能吗?当然。想知道如何做的吗?百姓网将与您分享他们在DevOps实践过程中的经验和技巧。
本次演讲视频录制于QCon杭州2011

架构之路——穿行在产品和业务之间

篱笆作为一家起源于社区的电子商务公司,反映到技术层面就是同时要面对产品和业务,以及经营战略的变化调整。如何在产品和业务的夹缝之间完成技术架构的抽象与平衡,寻找更有效的价值定位,这当中有些经验教训和个人感悟愿与众人分享。
本次演讲视频录制于QCon杭州2011

特性注入:成功三部曲

本文将对特性注入以及相关方法做一个扫盲性的介绍。我们会解释这个框架的关键要素,并附上实例来证实它们。为了让文章保持相对较短,我们不会深入到某个工具或方法中,而是会给出一些参考资料,以便大家做进一步的研究。