BT

如何利用碎片时间提升技术认知与能力? 点击获取答案

您现在处于全屏预览
关闭全屏预览

淘宝面向公网的实时可靠数据同步技术设计与实现
录制于:

| 作者 顾风胜 关注 0 他的粉丝 发布于 2017年3月7日 | GMTC大前端的下一站,PWA、Web框架、Node等最新最热的大前端话题邀你一起共同探讨。
47:53

概要
天猫淘宝有千万级的商家,双十一当天,单个商家在数据库里面有数百万数据,平台新增数据量达到数亿级别,通过API同步数据往往面临,数据库热点导致获取超时、分页查询越来越慢,主备同步延迟导致数据漏单,数万的外部系统同时争抢平台的数据库资源,数据库不堪重负,为了不影响双十一核心交易链路的稳定性,平台不得不对外采取限流措施。 针对这些问题,淘宝开放平台推出了数据同步服务,一种基于高性能异步化API和高可靠实时消息系统来设计、面向公网的异构数据库之间的数据同步服务。使用这个服务,可以把商家在天猫淘宝产生的数据实时可靠的推送到自身的RDS数据库里面,开发者直接通过访问本地RDS就能拿到所有的数据,没有资源争抢,就近访问,数据实时同步。2015年天猫双十一头两个小时,数据同步服务达到20万/秒的同步速度,数据同步到接近一万个外部RDS数据库,做到了秒级延迟,零漏单。

个人简介

顾风胜,阿里巴巴高级技术专家,2009年加入阿里,负责淘宝开放平台的研发工作,把开放平台打造成从千万级、亿级、十亿级、到百亿级调用量的平台,主要技术关注点在高性能网关、公网消息队列、公网数据同步,API开放自动化领域。

全球架构师峰会(International Architect Summit,下简称ArchSummit)是由InfoQ中文站主办的一次全球性架构师峰会。ArchSummit专门针对架构师人群,讲述与架构和架构师相关的各方面趋势、技术和案例。这也是继QCon之后,InfoQ中文站主办的又一次高端技术盛会。

登陆InfoQ,与你最关心的话题互动。


找回密码....

Follow

关注你最喜爱的话题和作者

快速浏览网站内你所感兴趣话题的精选内容。

Like

内容自由定制

选择想要阅读的主题和喜爱的作者定制自己的新闻源。

Notifications

获取更新

设置通知机制以获取内容更新对您而言是否重要

BT