BT

如何利用碎片时间提升技术认知与能力? 点击获取答案

快手与清华成立未来媒体数据联合研究院

| 作者 陈利鑫 关注 2 他的粉丝 发布于 2018年4月4日. 估计阅读时间: 8 分钟 | QCon上海2018 关注大数据平台技术选型、搭建、系统迁移和优化的经验。

看新闻很累?看技术新闻更累?试试下载InfoQ手机客户端,每天上下班路上听新闻,有趣还有料!

导读:继2014年成立人工智能实验室Y-Lab之后,风靡的短视频平台快手又在AI方面有了一些动作:成立快手与清华大学未来媒体数据联合研究院(Institute of Future Media Data,简称FMD),启动仪式如期在清华校园举行,不知仪式上双方会宣布哪些合作呢?

快手与清华大学成立未来媒体数据联合研究院

2018年4月3日,快手与清华大学未来媒体数据联合研究院启动仪式在清华校园开启。快手方面表示,快手和清华大学合作的目的在于“实现双方的互补多赢,整合清华大学在计算机图形学、图像处理、大数据和人工智能等领域的研发能力和学术影响力,结合快手在互联网领域的应用和用户优势,共同在学术研究和项目开发等方面合作,共同拓展社会影响力。”

清华大学党委常委、副校长尤政在致辞表示双方合作共赢之后,快手创始人兼CEO宿华走向舞台中央。

快手创始人兼CEO宿华

他在演讲中表示,经过一年的时间,快手与清华大学的合作终于落地,成立了清华-快手未来媒体数据联合研究院。谈到为什么将项目命名为“未来媒体数据联合研究院”,宿华表示,这是因为他认为未来的媒体已经与之前完全不同,在他看来,未来的媒体=记录+传播,而现在和将来,媒体+记录的载体将发生变化,每个人都将成为记录者,未来媒体也会有三大特征:

技术能力是未来媒体间这种最重要的底层能力;未来媒体需要人文社会科学智慧共同参与;数据是未来媒体最核心、最主要的能源。基于未来媒体的特征,快手推进了与清华等高校的合作。

宿华在发布会上表明了快手与清华的合作图景,即跨界融合,结合清华大学软件学院的技术和清华大学新闻学院社会学系的人文素养,以解决社会课题,校准技术方向。

在技术方面,快手CTO陈定佳为我们揭示了研究院为爱的合作方向,大致为计算机图像学、计算机图像处理、大数据、人工智能、多媒体技术、人机交互技术。

陈定佳说道,让每个人获得独特的幸福感是快手的愿景 ,通过使用AI和大数据技术,以及万亿级特征大数据,快手希望可以让用户获得幸福感。

随后,陈定佳向我们大致讲解了快手使用的框架和学习引擎。他说道,为了解决机型不同引起的各种问题,突破设备能力的限制,快手采用了高性能多媒体处理框架和深度学习引擎。



针对不同机型,快手自研的YCNN深度学习引擎,让处理速度提升50%,达到业界顶尖水平,用户可实时使用高质量特效。快手的多媒体处理框架可以完成视频处理、音频处理、音视频编解码、2D和3D渲染,以及动画效果,用户可以对自己的作品进行拍摄编辑、视觉特效、魔法表情、姿态识别和AR特效处理。

快手还能够突破地域、网络的限制,自适应传输协议可以动态调整内核参数、数据分片、并发链路KTP协议可以容忍80%的丢包率。快手的智能编解码技术可以根据不同内容和场景复杂度,不同编码复杂度优化提升10%。

多媒体内容理解算法及平台

为了更好地了解用户,快手开发了自己的多媒体内容理解算法及平台,可以进行人脸、图像、音乐和语音处理。



实时在线学习推荐系统



发布会上,陈定佳还发布了和清华联合研究的首批35个技术课题,包括:

  1. 无监督学习与高效率学习网络模型
  2. 真是世界模拟与移动端富体验互动技术
  3. 知识图谱、多模态信息融合模型与推荐技术
  4. 流媒体的人工智能信息提取、索引和分类理论与方法
  5. 场景信息理解与可控生成技术的研究与应用
  6. 海量视频数据传输与处理的优化技术

跨界研究课题包括媒介传播、舆情分析与媒介理论研究、短视频技术与传播开放平台构建与研究、人与人的影响粘连:民间原生影像的传播路径与研究等。

一家人工智能公司

作为一家短视频平台,快手从短视频浪潮的激烈竞争中脱颖而出,其另辟蹊径主攻二三线城市市场的做法也获得了巨大的回报,据说早在2018年初估值已超过180亿美元。

自2011年成立起,这家公司已经获得了众多资本的青睐:2017年3月,腾讯领投3.5亿美元;2018年初,B轮融资投资方红杉跟进,10亿美元,融资后估值180亿美元。据证实,“快手”最快将于今年下半年来港挂牌,估值更达1409亿元。作为内地短视频界的龙头之一,快手每日活跃用户超过1亿,但目前仍未有关于收入和利润的信息曝光。

相比之下,国内外的短视频平台竞争激烈,如火山小视频、抖音等。据3月27日第三方数据机构易观千帆发布的《中国短视频行业年度盘点分析2018》报告显示,快手是目前唯一一款月活用户破2亿的短视频App,以21883.78万人的月活跃用户数位居微信、QQ及微博之后,稳居国内第四大社交平台。值得一提的是,快手的日活用户数达到10812.67万,远超抖音的4397.72万、西瓜视频2915、39万以及火山小视频的2667.4万,甚至比头条系抖音、西瓜、火山三个短视频平台的日活用户量加起来还多出832.16万,后三者与快手之间的差距出现增大的趋势。而在发布会上,宿华更新了数据,快手的日活用户已达1.2亿,每天UGC视频上传数量大1500万条,用户日均使用时长60分钟,日均视频播放量150亿次。

在多如牛毛,已经杀成红海的短视频市场,为何快手能够冲出重围获得一席之地,或许与其将AI和算法分发等技术应用于产品短视频内容信息流等做法有关。也许很多用户都没发现,自己熟悉的快手用户界面,其实是算法根据他们的喜好推荐的内容,视频中一些“特技”也是AI工程师手下的作品。在AI技术开发商,快手有自己的研发团队——Y-Lab。

AI实验室Y-Lab

据了解,Y-Lab于2016年9月成立,研究领域涉及人工智能、机器学习、计算机视觉和计算机图形学等。在快手的诠释里,Y-Lab的名字其实暗含赶超著名的GoogleX实验室的含义,其中Y代表Young,Y是x的下一个字母,所以也代表着超越x。

Y-Lab的负责人郑文在清华毕业后在美国斯坦福计算机系读博士,其导师专注于电影特效,并两次获得奥斯卡科技奖。在博士期间,郑文的研究方向主要集中在计算机图形学和电影特效方面,毕业之后也一直在美国从事机器学习和计算机视觉相关的研究。

Y-Lab的成果早已被应用于快手的产品中,帮助用户直接将背景抠掉,换成自带背景;利用AR技术,使得人们通过手机摄像头拍出虚拟的、逐步盛开的多肉花朵;人体姿态捕捉技术主要在手机端运转,且不需要用户进行任何外带设备的佩戴,手机摄像头会自动捕捉用户的身体部位和动作进行特效转化,变为影视剧作品中的角色。

但来自抖音的品牌升级,“被复活”的微视等其他竞品的压力,快手也不是高枕无忧。在未来,AI技术用于各行各业是大势所趋,任何行业都不例外,采用了AI技术的平台会显示出越来越大的优势,想要迎头赶上或者不落伍,就得在技术开发山下苦功,做出真正能够满足用户需求,解决用户痛点的产品,才会成为最后的赢家。

这次与清华成立未来媒体数据联合研究院只是个开始,未来短视频平台快手和科研院校之间的合作还会碰撞出什么火花,我们拭目以待。


感谢徐川对本文的审校。

给InfoQ中文站投稿或者参与内容翻译工作,请邮件至editors@cn.infoq.com。也欢迎大家通过新浪微博(@InfoQ@丁晓昀),微信(微信号:InfoQChina)关注我们。

评价本文

专业度
风格

您好,朋友!

您需要 注册一个InfoQ账号 或者 才能进行评论。在您完成注册后还需要进行一些设置。

获得来自InfoQ的更多体验。

告诉我们您的想法

允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p

当有人回复此评论时请E-mail通知我

场景信息里脊肉与可控生成技术的研究与应用? by hu chifeng

场景信息里脊肉与可控生成技术的研究与应用?

Re: 场景信息里脊肉与可控生成技术的研究与应用? by Ding Alice

抱歉,错字,应该是“理解”;已经修改。

允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p

当有人回复此评论时请E-mail通知我

允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p

当有人回复此评论时请E-mail通知我

2 讨论

登陆InfoQ,与你最关心的话题互动。


找回密码....

Follow

关注你最喜爱的话题和作者

快速浏览网站内你所感兴趣话题的精选内容。

Like

内容自由定制

选择想要阅读的主题和喜爱的作者定制自己的新闻源。

Notifications

获取更新

设置通知机制以获取内容更新对您而言是否重要

BT