BT

如何利用碎片时间提升技术认知与能力? 点击获取答案

40:57
他的粉丝

携程基于大数据分析的实时风控体系介绍

作者 刘江  发布于  2018年1月30日 作者 刘江 关注 0 他的粉丝  发布于  2018年1月30日

本次分享将重点介绍携程 Aegis 系统,Chloro 行为分析系统,Rsession,大数据风控模型,风险画像和特征工程等风险管理方面的系统及实践。

39:46
他的粉丝

高性能高可用机票实时搜索系统

作者 梁启康  发布于  2017年8月17日 作者 梁启康 关注 2 他的粉丝  发布于  2017年8月17日

机票搜索解决的核心问题是如何在最短的时间内把全网最优的价格,最准确、全面的报出来? 围绕这个问题,有海量实时变化的站点数据、航司数据、运价数据,海量代理商的报价规则数据,实时变化的航班舱位数据。 这些数据的处理计算是搜索质量的关键。 如何构建高可用的系统,用尽量少的硬件资源,处理海量数据,达到极高的搜索准确率,极低的延迟时间?在这个主题里分享我们的经验。

32:39
他的粉丝

实时音视频质量评估与监控

作者 陈若非  发布于  2017年7月7日 作者 陈若非 关注 0 他的粉丝  发布于  2017年7月7日

这次 QCon 分享,会详细介绍影响实时音视频质量的三大因素,网络问题、设备问题、物理环境。以及相对应的测试,评估和监控方案。内容上会着重对语音测试体系进行说明,同时也覆盖视频测试的评估体系,结合大量实践,为大家介绍不同质量期望下得测试评估和监控手段,便于大家更准确的评估音视频引擎质量。

48:46
他的粉丝

LinkedIn 基于 Kafka 和 ElasticSearch 的实时日志分析系统

作者 李虓  发布于  2017年3月16日 作者 李虓 关注 2 他的粉丝  发布于  2017年3月16日

及时有效地搜索日志是 SRE 日常工作的重要内容。LinkedIn 从使用 Splunk 到建立基于 ES 和 kafka 的日志分发、索引系统,为 SRE 提供了近似实时的搜索平台来检索超过 400 多个子系统的日志。在本演讲中,我将和大家分享这套系统从无到有的一些技术架构经验。

37:07
他的粉丝

百度第三代 Spider 背后的万亿量级实时数据处理系统

作者 颜世光  发布于  2017年2月9日 作者 颜世光 关注 1 他的粉丝  发布于  2017年2月9日

Spider系统是百度搜索引擎的主要数据来源,每天处理着数万亿次的链接分析,和数百亿次的互联网资源采集。在过去,这其中多数工作由MapReduce系统完成,处理延时达到天级。从2014年开始,我们对Spider系统进行了大规模重构,以搜索结果更新延迟从周级缩短到分钟级为目标,设计实现了海量实时数据库Tera。以此为基础,构建了每天实时处理几万亿链接与网页更新的百度第三代Spider系统。

48:25
他的粉丝

Realtime data processing at Facebook

作者 陈国强  发布于  2017年2月6日 作者 陈国强 关注 0 他的粉丝  发布于  2017年2月6日

Realtime data processing powers many use cases at Facebook, including realtime reporting of the aggregated, anonymized voice of Facebook users, analytics for mobile applications...

30:20
他的粉丝

海量数据推送服务——实时处理架构的演进

作者 许建辉  发布于  2016年12月15日 作者 许建辉 关注 0 他的粉丝  发布于  2016年12月15日

TD 推送平台的一路演进过程中,从推送量、推送速度、设备量、移动客户端本身的复杂场景,一些传统软件架构中的常规做法在这些场景里并非全部适用。在此技术场景下,系统使用大数据算法优化了连接负载和任务分发。并对数据库敏感的连接资源进行了优化和更为精细的使用。为了降低数据库的请求负载,系统的缓存也有了多元化的发展。

23:39
他的粉丝

大规模实时流处理平台架构

作者 卜赫  发布于  2016年12月12日 作者 卜赫 关注 0 他的粉丝  发布于  2016年12月12日

随着不同网络质量下接入终端设备种类的增多,服务端转码已经成为视频点播和直播产品中必备的能力之一。直播产品讲究时效性,希望在一定的时间内让所有终端看到不同尺寸甚至是不同质量的视频,因此对转码的实时性要求也较高。实时流网络 LiveNet,它在整个流分发的环节中起着流传输通道和网络骨干的作用。

32:38
他的粉丝

Netflix基于微服务和Docker的实时数据处理实践

作者 徐振中  发布于  2016年12月2日 1 作者 徐振中 关注 2 他的粉丝  发布于  2016年12月2日 1

Netflix目前日处理1 trillion events数据,峰值每秒流量12.5 million/35GB。过去两年之内数据量增涨超过一个数量级。本次分享将会重点介绍Netflix是如何在一年时间之内搭建和维护如此级别的实时数据处理平台,另外也会剖析平台微服务基础构架和Docker等容器生态系统的原则,以及期间遇到的挑战、问题和我们的处理方法。

45:18
他的粉丝

阿里巴巴实时计算平台 JStorm Turbo

作者 封仲淹  发布于  2016年8月18日 作者 封仲淹 关注 0 他的粉丝  发布于  2016年8月18日

2015 阿里巴巴双 11 全球狂欢节,天猫交易额达到 912.17 亿元,而交易峰值达到 8.59 万笔/秒。在这天量交易背后,无数的系统齐心协力,共同完成。而实时计算平台 JStorm Turbo 就是其中重要的一员,支持着线上 1400 多项任务,让业务方在页面上托拉拽取快速部署监控任务或生成实时报表。

41:31
他的粉丝

海量用户的全球实时通信和互动直播云服务

作者 李伟  发布于  2016年8月18日 作者 李伟 关注 0 他的粉丝  发布于  2016年8月18日

互联网不是为实时所设计,在不可靠的基础互联网设施上,面对移动互联网复杂的网络条件、机房故障、线路路由器故障、互联互通等问题,保障实时性、高并发、大规模服务挑战的同时,仍然达到接近电信服务指标的高可用性。李伟在演讲中会分享在全球运营商、网络线路的经验,DNS问题、机房故障容错和切换、骨干网故障转移、蜂拥请求的应对和雪崩防范等架构设计和算法设计的经验,以此来保障超低延迟的实时通信和实时互动直播架构。

32:53
他的粉丝

基于实时价格计算的电商检索系统

作者 乔勇  发布于  2016年7月15日 作者 乔勇 关注 0 他的粉丝  发布于  2016年7月15日

酒店ota行业的库存价格模型比较复杂,它是一个多维度共同决定的变量,维度包括预订窗口、连住天数、预订人数、会员级别等,这属于一个指数级别的空间复杂度。

登陆InfoQ,与你最关心的话题互动。


找回密码....

Follow

关注你最喜爱的话题和作者

快速浏览网站内你所感兴趣话题的精选内容。

Like

内容自由定制

选择想要阅读的主题和喜爱的作者定制自己的新闻源。

Notifications

获取更新

设置通知机制以获取内容更新对您而言是否重要

BT