BT

如何利用碎片时间提升技术认知与能力? 点击获取答案

rss
他的粉丝

专访朱诗雄:Apache Spark中的全新流式引擎Structured Streaming

作者 Tina 关注 1 他的粉丝 发布于  2018年2月1日

Apache Spark在2016年的时候启动了Structured Streaming项目,一个基于Spark SQL的全新流计算引擎Structured Streaming,让用户像编写批处理程序一样简单地编写高性能的流处理程序。经过一年多的改进和完善,目前Structured Streaming已经在Databricks内部和客户广泛使用,InfoQ采访了Structured Streaming的核心开发朱诗雄来具体了解这个项目。

他的粉丝

为什么越来越多的公司在使用Spark Streaming

作者 孙镜涛 关注 2 他的粉丝 发布于  2016年1月4日 2

Databricks最近对1400多家Spark用户进行了一次调查,结果显示这些用户对Spark Streaming的使用率与2014年相比增长了56%,另外,有48%的受访者将Spark Streaming标记为最常用的Spark组件。在Spark Streaming不断增长的用户群中,Uber、Netflix和Pinterest等家喻户晓的公司赫然在列,那么为什么使用Spark Streaming加速业务发展的公司越来越多呢?最近Spark Streaming的主要开发人员Tathagata Das在DataNami上发表了一篇文章,从需求、功能以及用户场景等方面对此进行了介绍。

他的粉丝

Sharethrough使用Spark Streaming优化实时竞价

作者 孙镜涛 关注 2 他的粉丝 发布于  2014年4月18日 1

来自于Sharethrough的数据基础设施工程师Russell Cardullo和Michael Ruggiero最近在Cloudera博客上投递了一篇博文,分享了他们是如何使用Spark Streaming解决复杂的实时问题的。

登陆InfoQ,与你最关心的话题互动。


找回密码....

Follow

关注你最喜爱的话题和作者

快速浏览网站内你所感兴趣话题的精选内容。

Like

内容自由定制

选择想要阅读的主题和喜爱的作者定制自己的新闻源。

Notifications

获取更新

设置通知机制以获取内容更新对您而言是否重要

BT