BT

如何利用碎片时间提升技术认知与能力? 点击获取答案

rss
41:00
他的粉丝

Secret Kung Fu of Massive Scale Stream Processing with Apache Samza

作者 刘新宇  发布于  2018年2月24日 作者 刘新宇 关注 0 他的粉丝  发布于  2018年2月24日

事件处理是场争分夺秒的比赛,需要在秒级甚至毫秒级内提供更好的关联性和精确性。 为了赢得这场比赛,在过去领英5年的生产环境中,我们已经稳定地运行了400+Samza 应用程序,每天处理超过万亿事件,在这一切背后,领英拥有怎样的秘籍呢?

40:55
他的粉丝

实时流系统Heron的异常检测和恢复

作者 吴惠君  发布于  2018年2月20日 作者 吴惠君 关注 0 他的粉丝  发布于  2018年2月20日

应近年来大规模实时分析的需求,很多流处理系统被开发出来。Twitter Heron开源系统就是其中的代表项目之一。这类系统要求在软件或者硬件失败的极端情况下能有较好的服务水平。为了达到这种要求,Twitter Heron系统添加了Dhalion异常检测和恢复框架来保障Heron系统的服务水平。

42:19
他的粉丝

Sloth: 网易流计算服务化平台架构实践

作者 金晓军  发布于  2018年1月9日 作者 金晓军 关注 0 他的粉丝  发布于  2018年1月9日

网易历经了20年的发展,各业务线沉淀了丰富的数据。大数据平台在满足各业务线数据存储、计算的任务,同时承担着整合集团数据,为客户提供全方位的大数据服务。 在满足业务需求的过程中,对 Hadoop 各组件进行了定制优化(如分时调度,权限控制,元数据管理,Spark 多租户,Spark 高可用,流计算相关)。

23:39
他的粉丝

大规模实时流处理平台架构

作者 卜赫  发布于  2016年12月12日 作者 卜赫 关注 0 他的粉丝  发布于  2016年12月12日

随着不同网络质量下接入终端设备种类的增多,服务端转码已经成为视频点播和直播产品中必备的能力之一。直播产品讲究时效性,希望在一定的时间内让所有终端看到不同尺寸甚至是不同质量的视频,因此对转码的实时性要求也较高。实时流网络 LiveNet,它在整个流分发的环节中起着流传输通道和网络骨干的作用。

40:52
他的粉丝

再造轮子之道 Uber Real-time Streaming Lead

作者 袁泳  发布于  2016年2月5日 作者 袁泳 关注 0 他的粉丝  发布于  2016年2月5日

本次演讲会结合不同公司的项目和实践经验,讨论决定是否再造轮子简单原则以及操作方法。

登陆InfoQ,与你最关心的话题互动。


找回密码....

Follow

关注你最喜爱的话题和作者

快速浏览网站内你所感兴趣话题的精选内容。

Like

内容自由定制

选择想要阅读的主题和喜爱的作者定制自己的新闻源。

Notifications

获取更新

设置通知机制以获取内容更新对您而言是否重要

BT