BT

如何利用碎片时间提升技术认知与能力? 点击获取答案

您现在处于全屏预览
关闭全屏预览

基于 Blink SQL 的阿里实时计算平台(Stream Compute)
录制于:

| 作者 伍翀 关注 0 他的粉丝 发布于 2017年12月30日 | QCon上海2018 关注大数据平台技术选型、搭建、系统迁移和优化的经验。
32:24

概要
随着近些年大数据技术的不断发展和成熟,无论是传统企业还是互联网公司都已经不再仅仅满足于批处理,对流处理的场景和需求也越来越强烈。于是业界也一直在探索统一流处理和批处理的引擎和 API,比如近几年火爆的 Spark,Beam,还有 Flink。阿里巴巴自 2015 年就开始改进 Flink,并创建了内部分支 Blink,目前服务了阿里集团内部搜索、推荐、广告和蚂蚁等大量核心实时业务。Blink SQL 和 Table API (java/scala 版的类 SQL API)是一套基于 Blink 引擎打造的可以同时支持流处理和批处理的统一的 API。在本次演讲中,我们会介绍当前 Blink SQL 丰富的功能,底层实现的原理,并且讲解流与表是如何相互转换的。

个人简介

伍翀,花名“云邪”,阿里巴巴计算平台事业部资深研发工程师,Apache Flink Committer。北京理工大学硕士毕业,2015 年加入阿里巴巴,参与阿里巴巴实时计算引擎 JStorm 的开发与设计。从 2016 年开始从事阿里新一代实时计算引擎 Blink SQL 的开发与优化。现在专注的方向主要是分布式处理和实时计算,闲暇时喜欢看动漫和读书。

QCon是由InfoQ主办的全球顶级技术盛会,每年在伦敦、北京、东京、纽约、圣保罗、上海、旧金山召开。自2007年3月份首次举办以来,已经有超万名高级技术人员参加过QCon大会。QCon内容源于实践并面向社区,演讲嘉宾依据热点话题,面向5年以上的技术团队负责人、架构师、工程总监、高级开发人员分享技术创新和最佳实践。

登陆InfoQ,与你最关心的话题互动。


找回密码....

Follow

关注你最喜爱的话题和作者

快速浏览网站内你所感兴趣话题的精选内容。

Like

内容自由定制

选择想要阅读的主题和喜爱的作者定制自己的新闻源。

Notifications

获取更新

设置通知机制以获取内容更新对您而言是否重要

BT