大规模视频网站的计费与流量管理
本次分享将会就大规模视频网站的计费与流量管理这个话题,从操作层面细细进行讲解和分析,为系统工程师们揭示平日里我们没有关心的另一些内容。同时也希望本次分享能揭示行业中的一些“潜规则”,让互联网行业的流量与带宽管理更为开放与简洁。
本次演讲视频录制于QCon杭州2011。
该内容已经被标记书签!
标记书签错误,请重试!
作者 Srini Penchikala 译者 张龙 发布于 2008年4月25日
开源的JVM集群框架Terracotta的最新版包含了一些新特性,如集群可视化工具和对Tomcat 6平台的官方支持。周一Terracotta小组发布了该产品的2.6GA版,该版本还包含了一定的性能提升。
集群可视化与监测工具套件提供了整个应用健康度和性能的视图。操作员和开发者可以使用这些工具监测应用的性能,如CPU使用率、网络和磁盘活动、 Terracotta统计、对象改变率和垃圾收集周期。这些工具包括集群可视化和对运行状态快照的可视化图表,这些图表存储在数据库中以便之后可以离线浏 览。我们可以利用Terracotta管理控制台的锁分析器(lock profiler)查看这些快照以找出应用中的死锁和其他可能发生死锁的地方。
Terracotta的CTO Ari Zilka最近写了一篇博文更加深入的介绍了可视化工具和锁分析器(lock profiler)。他介绍了profiler工具以及如何使用它诊断运行时的性能热区。
Terracotta对Tomcat的支持包括web应用中session和应用级数据的集群,只要应用运行在流行的开源servlet容器上就可以。Terracotta 2.6还向其Forge项目站点增加了新的项目,现在该站点已经有了对EHCache和Hibernate的集成。这两个框架以前在Terracotta核心包中。Forge项目站点为Terracotta开发小组和社区成员提供了一个交流平台,这样大家就可以在Terracotta特定的集成和项目上以及任何缺陷的解决上进行交流和协作。Terracotta集成模块支持配置元素集,并且还支持在Terracotta配置中将Java类打包成一个单独的模块。
InfoQ采访了Terracotta小组以了解最新版的新特性。关于新版本中集群可视化和管理工具的细节问题,他们说:
集群可视化特性能以可视化的方式调优应用。除了用来搜集更多统计数据以便进行离线处理的统计器外,该可视化工具还包含运行时统计数据,这样你就可以查看到 实时数据了。运行时统计数据包括:Java堆、系统CPU、Terracotta事务、Terracotta故障率。此外,它还能记录30多种统计数据, 包括:CPU、磁盘、网络、堆、线程转储(Thread Dumps)、Terracotta队列深度等。
现在你可以使用管理控制台查看集群中所有JVMs上的线程转储(Thread Dumps)。通过他们你可以了解到集群上的这些线程在做什么。你还可以使用管理控制台在远程JVMs上调整日志级别,也能从集群中将某些JVMs排除出去以便调试。
关于性能改善问题,该小组解释了这些改善后面的动机以及他们是如何做到的。
性能改善着眼于一些通用操作,如填充缓存时的密集循环、对于实际字符串的自动压缩支持以及对一般的读/写的性能改善。
我们已经构建了一个工作量模型平台以模拟在我们的客户的应用中所遇到的一些用例。该模型平台能围绕着现实世界中的具体代码模式快速创建性能测试,并且将它 们放进自动的持续集成和测试套件中。这使得我们可以建立性能基准,并从该基准中不断改善性能,更重要的是我们可以时刻监视性能以确保没有性能衰退。
InfoQ问到了Terracotta产品在新特性和增强方面的未来路线图。
对于Terracotta来说,2008年最重要的是运行控制台的开发,它将提供应用的可视化、控制和SLA策略管理,包括:
- 服务器striping和极端扩展的镜像
- 历史分析(为你的应用采用Google式的分析)
- 自动化的快照
- 应用消息中心
- 一键部署
- SLA驱动的部署(即需部署)
- 帮助升级(滚动升级,自动化的软件部署)
在其他新闻中,Terracotta宣布他们正在用Terracotta 2.6版构建Hyperic SIGAR(系统信息搜集器和报告器)以获得关键的操作系统和硬件信息。SIGAR是Hyperic HQ管理平台的一部分,它提供了像自动化统计、检测、登录跟踪、控制及远程诊断这样的服务。
查看英文原文:Terracotta 2.6 Supports Cluster Visualization Tools and Tomcat 6 Integration
译者简介:张龙,同济大学软件工程硕士,现就职于理光软件研究所。主要从事文档工作流和办公自动化解决方案的研发工作。热衷于Java轻量级框架的研究,对敏捷方法很感兴趣。曾有若干年的J2EE培训讲师经历。参与InfoQ中文站内容建设,请邮件至china-editorial[at]infoq.com。
译者 张龙 热衷于编程,乐于分享,对新技术有强烈的探索欲,对Java轻量级框架有一定研究。
本次分享将会就大规模视频网站的计费与流量管理这个话题,从操作层面细细进行讲解和分析,为系统工程师们揭示平日里我们没有关心的另一些内容。同时也希望本次分享能揭示行业中的一些“潜规则”,让互联网行业的流量与带宽管理更为开放与简洁。
本次演讲视频录制于QCon杭州2011。
Jeffrey Richter以其多本Windows核心技术的经典著作而闻名,同时,他深入掌握微软的.NET等一系列核心技术,2012年1月,Jeffrey Richter在北京接受了InfoQ中文站的专访,谈到Windows 8和WinRT编程,并就异步编程、Windows编程中的可扩展性、性能和安全性方面给出自己的建议。
云计算平台的可用性,相比传统互联网服务而言,更加复杂和困难,也更具有挑战性。本文借助新浪SAE云平台为读者讲述了云平台可用性的定义、如何打造高可用的平台,以及对云计算的用户提出了建议。
淘宝高度重视Java平台的健康发展,组建了一个团队专注于Java平台的底层部分的性能、功能与稳定性改进;工作主要基于OpenJDK中的HotSpot VM开展,其中一些通用的功能随后也会逐渐反馈给OpenJDK社区。希望能与使用Java平台开发应用的大家交流经验。
本次演讲视频录制于QCon杭州2011。
2011年4月21日至22日是值得云计算从业者纪念的日子。Amazon的IaaS服务出现故障,导致许多商业网站的服务中断,影响非常严重。作为云计算用户,我们需要思考的是,如何保证即便在云服务不可用的情况,我们的应用架构仍然能够屹立不倒?本文正是站在云计算用户的角度试图探讨这一问题。
12人的技术团队,4组刀片服务器,每月20亿的访问量,每日1次准时部署,99.9%的可用性。这可能吗?当然。想知道如何做的吗?百姓网将与您分享他们在DevOps实践过程中的经验和技巧。
本次演讲视频录制于QCon杭州2011。
篱笆作为一家起源于社区的电子商务公司,反映到技术层面就是同时要面对产品和业务,以及经营战略的变化调整。如何在产品和业务的夹缝之间完成技术架构的抽象与平衡,寻找更有效的价值定位,这当中有些经验教训和个人感悟愿与众人分享。
本次演讲视频录制于QCon杭州2011。
本文将对特性注入以及相关方法做一个扫盲性的介绍。我们会解释这个框架的关键要素,并附上实例来证实它们。为了让文章保持相对较短,我们不会深入到某个工具或方法中,而是会给出一些参考资料,以便大家做进一步的研究。
没有回复
关注此讨论 回复