BT

如何利用碎片时间提升技术认知与能力? 点击获取答案

Falcor:Netflix的数据抓取开源库

| 作者 张天雷 关注 4 他的粉丝 发布于 2015年8月25日. 估计阅读时间: 4 分钟 | GMTC大前端的下一站,PWA、Web框架、Node等最新最热的大前端话题邀你一起共同探讨。

作为一家在线影片租赁供应商,Netflix通过移动应用、桌面应用或TV来为用户提供电影和电视节目。在使用过程中,用户总是需要通过这些应用来获取位于服务器的远端数据资源。近日,为了提高远程数据抓取的效率,Netflix发布了全新数据平台Falcor的开发者预览版。接下来,本文对Falcor进行简要介绍。

Falcor的设计目标并不是用来替代应用服务器、数据库或者MVC框架。其功能是作为中间件,来优化应用程序不同层之间的通信效率。之前,Netflix已经提出了JSON Graph的概念,来把Graph数据转变为JSON对象。该JSON格式可以消除传统JSON格式引入的重复数据问题,并提高数据传输的效率。Falcor利用了该JSON格式,允许应用程序把所有远端的数据源用一个单独的JSON Graph来表示,提高数据抓取的效率。而且,用户仍然可以使用get、set和call等熟悉的JavaScript方法进行数据读取等操作。Falcor的一个理念就是,用户只要熟悉数据,就熟悉其API。此外,当用户需要访问数据时,Falcor会根据需求保证尽可能少的数据传输,同时保证大量数据传输的高效性。

Falcor的特点主要表现为三个方面——一个模型随处使用、数据即是API和云绑定。当使用Falcor时,客户端仍然像请求本地JSON对象一样请求远端的JSON资源。为了获得远端服务器中JSON资源中的值,客户端需要把服务器JavaScript的路径传递到JSON对象内的每一个希望获得的值中。然后,服务器就会把只包含这些值的JSON对象的子集返回到客户端。这样,客户端就可以把请求的多个数据轻松封装到一个URL请求中。为了保证应用服务器处于无状态模式,Falcor在处理请求的路径中加入了专门的路由器。这些路由器根据一个或多个JavaScript路径,来把请求发送到不同的服务器中。而且,路由器只向客户端暴露出了一个单独的JSON模型,使得客户端可以轻松获取来自不同服务器的数据。这种机制也就保证了Falcor的一个模型随处使用的特性。

另外一方面,Falcor并不需要用户来重新了解一些复杂的服务层。Falcor把远程数据封装为与本地数据同样的接口。客户端仍然可以使用类似的JavaScript路径和操作来处理数据。二者最大的差别只在于Falcor的客户端API是异步的。这样,服务器端的数据就可以自由移动,并不会影响到客户端的代码。最后,云绑定体现为Falcor采用的异步MVC模式。在Falcor中,视图、模型以及控制器之间的通信都是异步的。这样,在视图驱动数据抓取时,只有渲染一个视图需要的那部分数据被抓取,有效保证了通信数据的最小化。

此外,为了提高通信的效率,Falcor采用了缓冲、打包和去重三种策略。缓冲策略会把请求的数据暂存在本地。这样,下次同样的请求就可以直接从本地获取,大大减少通信量和响应时间。打包策略负责把若干小的请求汇集为一个大的请求,可以大大提高有效载荷的比例。去重策略则对请求进行过滤,去除不必要的请求。

目前,开发人员已经可以通过Falcor官方网站GitHub或者npm来下载开发者预览版Falcor。除了一些相对成熟的模块,该版本中包含了产品中还未使用的Falcor路由器的Node版本。Netflix官方表示,其开发团队目前仍处在积极进行Falcor的网上工作。Falcor的发展路线图将在不久之后给出。Netflix希望通过本版本的发布,获得广大开发人员的反馈,从而为正式版的开发打好基础。


感谢徐川对本文的审校。

给InfoQ中文站投稿或者参与内容翻译工作,请邮件至editors@cn.infoq.com。也欢迎大家通过新浪微博(@InfoQ@丁晓昀),微信(微信号:InfoQChina)关注我们,并与我们的编辑和其他读者朋友交流(欢迎加入InfoQ读者交流群InfoQ好读者)。

评价本文

专业度
风格

您好,朋友!

您需要 注册一个InfoQ账号 或者 才能进行评论。在您完成注册后还需要进行一些设置。

获得来自InfoQ的更多体验。

告诉我们您的想法

允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p

当有人回复此评论时请E-mail通知我
社区评论

允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p

当有人回复此评论时请E-mail通知我

允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p

当有人回复此评论时请E-mail通知我

讨论

登陆InfoQ,与你最关心的话题互动。


找回密码....

Follow

关注你最喜爱的话题和作者

快速浏览网站内你所感兴趣话题的精选内容。

Like

内容自由定制

选择想要阅读的主题和喜爱的作者定制自己的新闻源。

Notifications

获取更新

设置通知机制以获取内容更新对您而言是否重要

BT