大规模视频网站的计费与流量管理
本次分享将会就大规模视频网站的计费与流量管理这个话题,从操作层面细细进行讲解和分析,为系统工程师们揭示平日里我们没有关心的另一些内容。同时也希望本次分享能揭示行业中的一些“潜规则”,让互联网行业的流量与带宽管理更为开放与简洁。
本次演讲视频录制于QCon杭州2011。
该内容已经被标记书签!
标记书签错误,请重试!
作者 Sebastien Auvray 译者 Jason Lai 发布于 2007年6月19日
一直以来,篠原俊一(Shunichi Shinohara)和加藤究(Kiwamu Kato)在致力于将可靠消息传送(Reliable Messaging)引入Ruby。他们以先前设计基于Java的高容量消息传送框架的经验为基础,通过他们自主的API和协议的项目,试图将这个努力变为现实。AP4R这个项目的名称是Asynchronous Processing for Ruby的缩写,意即“Ruby的异步处理”。该项目是一个异步可靠消息处理的实现,提供消息队列和消息分派的功能。篠原和加藤在日本Ruby会议2007(RubyKaigi 2007)上进行了演讲(PDF幻灯片),介绍了他们的API,并强调其核心设计哲学:鲁棒性和轻量级。
这个项目问世仅仅一年,但已经能支持:
- 不管业务逻辑是非同步调用还是同步调用的,都可以以简单的Web应用或者Ruby代码的形式实现;
- RBMS(MySQL)或者基于文件的消息持久化能力;
- 支持在单个或者多个服务器上跨多个AP4R进程的负载平衡;
- 对以下多个协议的支持:XML-RPC、SOAP和HTTP POST等等。
先前,篠原和加藤已经实现过他们自己的基于Java的API和协议(称为RtFA),这项成果被用于一个包含100台服务器的大型应用中,该应用每天处理超过1亿条消息。篠原和加藤声称,他们已经改进了先前在AP4R上的工作,并且也在易用性上花了很大工夫。AP4R所附带的文档非常完整详尽。
要将AP4R整合进Rails,典型流程如下:
- 客户端(如Web浏览器)向Web服务器(Apache和Lighttpd等)发送请求;(
- Rails应用通过mod_proxy或者其它被同步地在mongrel上执行;
- Rails应用通过AP4R的API发送消息,并可以在随后立刻响应给客户端;
- AP4R将消息放入队列,并且异步地将其请求到Web服务器;
- 异步的业务逻辑(以常见的Rails Action的形式实现)被执行。
0.3.x关注的是后台服务化(Daemonization)、URL重写过滤器(URL-rewrite filter)、DLQ / SAF恢复,以及对将Stomp和HTTP作为底层协议的支持。今后的版本将包含对监控和管理的支持(如线程状态和Web前端)、与Cacti和Nagios等的协作、多进程、动态可配置性、自动恢复和阻塞队列等等。
查看英文原文:Reliable Messaging in Ruby with AP4R
本次分享将会就大规模视频网站的计费与流量管理这个话题,从操作层面细细进行讲解和分析,为系统工程师们揭示平日里我们没有关心的另一些内容。同时也希望本次分享能揭示行业中的一些“潜规则”,让互联网行业的流量与带宽管理更为开放与简洁。
本次演讲视频录制于QCon杭州2011。
Jeffrey Richter以其多本Windows核心技术的经典著作而闻名,同时,他深入掌握微软的.NET等一系列核心技术,2012年1月,Jeffrey Richter在北京接受了InfoQ中文站的专访,谈到Windows 8和WinRT编程,并就异步编程、Windows编程中的可扩展性、性能和安全性方面给出自己的建议。
云计算平台的可用性,相比传统互联网服务而言,更加复杂和困难,也更具有挑战性。本文借助新浪SAE云平台为读者讲述了云平台可用性的定义、如何打造高可用的平台,以及对云计算的用户提出了建议。
淘宝高度重视Java平台的健康发展,组建了一个团队专注于Java平台的底层部分的性能、功能与稳定性改进;工作主要基于OpenJDK中的HotSpot VM开展,其中一些通用的功能随后也会逐渐反馈给OpenJDK社区。希望能与使用Java平台开发应用的大家交流经验。
本次演讲视频录制于QCon杭州2011。
2011年4月21日至22日是值得云计算从业者纪念的日子。Amazon的IaaS服务出现故障,导致许多商业网站的服务中断,影响非常严重。作为云计算用户,我们需要思考的是,如何保证即便在云服务不可用的情况,我们的应用架构仍然能够屹立不倒?本文正是站在云计算用户的角度试图探讨这一问题。
12人的技术团队,4组刀片服务器,每月20亿的访问量,每日1次准时部署,99.9%的可用性。这可能吗?当然。想知道如何做的吗?百姓网将与您分享他们在DevOps实践过程中的经验和技巧。
本次演讲视频录制于QCon杭州2011。
篱笆作为一家起源于社区的电子商务公司,反映到技术层面就是同时要面对产品和业务,以及经营战略的变化调整。如何在产品和业务的夹缝之间完成技术架构的抽象与平衡,寻找更有效的价值定位,这当中有些经验教训和个人感悟愿与众人分享。
本次演讲视频录制于QCon杭州2011。
本文将对特性注入以及相关方法做一个扫盲性的介绍。我们会解释这个框架的关键要素,并附上实例来证实它们。为了让文章保持相对较短,我们不会深入到某个工具或方法中,而是会给出一些参考资料,以便大家做进一步的研究。
没有回复
关注此讨论 回复