BT

如何利用碎片时间提升技术认知与能力? 点击获取答案

您现在处于全屏预览
关闭全屏预览

神马搜索大数据基础架构
录制于:

| 作者 黄锐华 关注 0 他的粉丝 发布于 2016年9月2日 | GMTC大前端的下一站,PWA、Web框架、Node等最新最热的大前端话题邀你一起共同探讨。

亲爱的读者:我们最近添加了一些个人消息定制功能,您只需选择感兴趣的技术主题,即可获取重要资讯的邮件和网页通知

37:42

概要
网页搜索需要处理海量的互联网网页(万亿级),对数据进行复杂的处理,并保证时效性。如何存储海量数据、如何支持众多规模庞大的业务流程、如何满足海量数据的计算需求是核心问题。当开源系统无法满足需求时该如何选择、自建分布式存储和计算系统需要多大代价?本次分享将介绍神马大数据架构全貌,并深入讲解神马自己的分布式存储和流计算系统。

个人简介

黄锐华,阿里巴巴 神马搜索 高级专家,神马搜索大数据平台架构负责人。2009年加入阿里巴巴,一直从事网页搜索相关工作。负责网页流程体系建设、分布式存储系统实现、流计算系统实现、图数据库服务、spark算法平台等基础系统。在大规模分布式系统架构和实现上有丰富经验。

全球架构师峰会(International Architect Summit,下简称ArchSummit)是由InfoQ中文站主办的一次全球性架构师峰会。ArchSummit专门针对架构师人群,讲述与架构和架构师相关的各方面趋势、技术和案例。这也是继QCon之后,InfoQ中文站主办的又一次高端技术盛会。

登陆InfoQ,与你最关心的话题互动。


找回密码....

Follow

关注你最喜爱的话题和作者

快速浏览网站内你所感兴趣话题的精选内容。

Like

内容自由定制

选择想要阅读的主题和喜爱的作者定制自己的新闻源。

Notifications

获取更新

设置通知机制以获取内容更新对您而言是否重要

BT