BT

如何利用碎片时间提升技术认知与能力? 点击获取答案

流  在InfoQ上的内容 rss

文章所属 流 rss

架构 & 设计 关注 1104 他的粉丝 深度解读:深度学习在IoT大数据和流分析中的应用 作者 马卓奇 关注 5 他的粉丝 发布于 2018年2月26日 1

他的粉丝 崛起的GPU数据库大揭秘:多数据流实时分析,如何做到快如闪电? 作者 杨旸 关注 2 他的粉丝 发布于 2017年9月4日

他的粉丝 Kafka设计解析(七)- 流式计算的新贵 Kafka Stream 作者 郭俊 关注 100 他的粉丝 发布于 2017年8月3日 2

他的粉丝 A/B测试之外:Netflix通过实验和数据科学改善流媒体播放体验 作者 Nirmal Govind 关注 0 他的粉丝 发布于 2017年7月4日

他的粉丝 基于 Flow 的云网分析 作者 张天鹏 关注 0 他的粉丝 发布于 2016年12月30日

他的粉丝 发生在Optimizely公司的由批量到流式分析的故事 作者 David Yu 关注 0 他的粉丝 发布于 2016年12月28日

他的粉丝 主流流处理框架比较(系列文章) 作者 Petr Zapletal 关注 0 他的粉丝 发布于 2016年7月8日 1

他的粉丝 物联网(IOT)时代的流处理和消息系统 作者 Ben Lorica 关注 0 他的粉丝 发布于 2016年6月27日

他的粉丝 Apache的流处理技术概述 作者 Ian Hellström 关注 0 他的粉丝 发布于 2016年5月21日

演讲所属 流 rss

语言 & 开发 关注 489 他的粉丝 Secret Kung Fu of Massive Scale Stream Processing with Apache Samza 作者 刘新宇 关注 0 他的粉丝 发布于 2018年2月24日 事件处理是场争分夺秒的比赛,需要在秒级甚至毫秒级内提供更好的关联性和精确性。 为了赢得这场比赛,在过去领英5年的生产环境中,我们已经稳定地运行了400+Samza 应用程序,每天处理超过万亿事件,在这一切背后,领英拥有怎样的秘籍呢? 在这次分享中,我们将观察 Samza 的以下特性: a)一个流处理API,允许用户专注于处理逻辑,而不用担心执行细节; b)灵活的部署模式,我们能够在Yarn集群或AWS'EC2集群中运行Samza应用; c)在本地持久化中间状态,从而轻松应对大规模的有状态应用的扩展 d)支持异步处理,因此能够允许远程数据I/O支持整个事件消费产生的吞吐量。 e)最后,我们还会探索Samza作为一个平台如何兼容流处理和批处理两种模式。

语言 & 开发 关注 489 他的粉丝 实时流系统Heron的异常检测和恢复 作者 吴惠君 关注 0 他的粉丝 发布于 2018年2月20日 应近年来大规模实时分析的需求,很多流处理系统被开发出来。Twitter Heron开源系统就是其中的代表项目之一。这类系统要求在软件或者硬件失败的极端情况下能有较好的服务水平。为了达到这种要求,Twitter Heron系统添加了Dhalion异常检测和恢复框架来保障Heron系统的服务水平。 Dhalion异常检测和恢复框架使用polocy(策略)来整合detector(检测器)和resolver(执行器)模块。整个系统非常灵活。通过替换policy或者detector或者resolver能进行各种检测和恢复任务,包括检测back pressure(反压)指标并进行扩容,和检测负载指标并重新调度容器等等。Dhalion框架的应用给Heron系统带来了初步的自行规范调整机制。

访谈所属 流 rss

他的粉丝 姜冰:FreeWheel高性能可扩展的流式计算框架实践 作者 姜冰 关注 0 他的粉丝 发布于 2017年9月5日 这里是QCon北京2017采访间,我们请到了FreeWheel的姜老师,给大家分享一个FreeWheel大数据处理实践的报告。

新闻所属 流 rss

他的粉丝 为什么越来越多的公司在使用Spark Streaming 作者 孙镜涛 关注 2 他的粉丝 发布于 2016年1月4日 2

登陆InfoQ,与你最关心的话题互动。


找回密码....

Follow

关注你最喜爱的话题和作者

快速浏览网站内你所感兴趣话题的精选内容。

Like

内容自由定制

选择想要阅读的主题和喜爱的作者定制自己的新闻源。

Notifications

获取更新

设置通知机制以获取内容更新对您而言是否重要

BT