BT

如何利用碎片时间提升技术认知与能力? 点击获取答案

数据库新闻汇总:ActiveRecord数据分片,更快的Postgres IO

| 作者 Mirko Stocker 关注 1 他的粉丝 ,译者 郭晓刚 关注 0 他的粉丝 发布于 2008年7月24日. 估计阅读时间: 2 分钟 | AICon 关注机器学习、计算机视觉、NLP、自动驾驶等20+AI热点技术和最新落地成功案例。

本次数据库新闻汇总有,FiveRun最近开源的ActiveRecord数据分片插件DataFabric;如何用Postgres异步客户端API和Ruby 1.9的Fibers来加速Postgres数据访问。

ActiveRecord的数据分片

数据分片(Sharding)是一种将数据库打散成小块,然后分布到多台服务器上的技术,可以提高性能和可伸缩性。数据如何分割在很大程度上取决于应用的具体情况,比如eBay可以按照商品类别来划分。

ActiveRecord本身并不支持数据分片,于是才有了FiveRuns的DataFabric。DataFabric是一个ActiveRecord插件,它为数据模型增加了数据分片和复制的能力。

在模型中加入分片相当简单,它在README里给出了这样的例子:

class MyHugeVolumeOfDataModel < ActiveRecord::Base

  data_fabric :replicated => true, :shard_by => :city

end

详细信息请参阅FiveRuns博客或者DataFabric GitHub仓库

更快的Postgres IO 

另一则数据库新闻是Muhammed Ali将Ruby的Postgres访问速度提高了约40%。他用Postgres的异步客户端API和Ruby 1.9 Fibers实现了一个非阻塞的连接池和fiber池。从用户程序的角度看,交互过程是这样的:

[……]当一个fiber调用cpool.exec,查询被送到池中处理,该fiber被挂起,让路给 其他fiber。 其他fiber到达cpool.exec的时候也同样会挂起。稍后你会在事件循环中收到查询结束的通知(但顺序不定),然后与已结束查询相关联的 fiber将恢复执行。 

Muhammed还打算将之与EventMachine做更好的集成,也许能更进一步提升速度。请参阅Muhammad的博客,他将在上面给出代码的介绍和分析详情。

查看英文原文:Databases Roundup: Data Sharding for ActiveRecord and Faster Postgres IO

评价本文

专业度
风格

您好,朋友!

您需要 注册一个InfoQ账号 或者 才能进行评论。在您完成注册后还需要进行一些设置。

获得来自InfoQ的更多体验。

告诉我们您的想法

允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p

当有人回复此评论时请E-mail通知我
社区评论

允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p

当有人回复此评论时请E-mail通知我

允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p

当有人回复此评论时请E-mail通知我

讨论

登陆InfoQ,与你最关心的话题互动。


找回密码....

Follow

关注你最喜爱的话题和作者

快速浏览网站内你所感兴趣话题的精选内容。

Like

内容自由定制

选择想要阅读的主题和喜爱的作者定制自己的新闻源。

Notifications

获取更新

设置通知机制以获取内容更新对您而言是否重要

BT