BT

如何利用碎片时间提升技术认知与能力? 点击获取答案

  • 他的粉丝

    消息中间件选型分析:从Kafka与RabbitMQ的对比看全局

    作者 朱忠华 关注 9 他的粉丝 发布于  2018年5月3日

    在整体架构中引入消息中间件,势必要考虑很多因素,比如成本及收益问题,怎么样才能达到最优的性价比?虽然消息中间件种类繁多,但是各自都有各自的侧重点,选择合适自己、扬长避短无疑是最好的方式。如果你对此感到无所适从,本文或许可以参考一二。

  • 他的粉丝

    开源软件成熟度评测报告-分布式消息中间件

    作者 王琪 关注 0 他的粉丝 , 蒋丹妮 关注 0 他的粉丝 , 刘为怀 关注 0 他的粉丝 , 何东杰 关注 0 他的粉丝 发布于  2017年12月20日 3

    面对诸多的分布式消息中间件,金融企业面临如何选择并确定适合企业长期发展的相应开源软件。金融行业开源软件研究工作组结合金融企业的实际应用场景,针对主流的开源分布式消息中间件建立评测并开展评测实施,以支撑金融企业选择成熟度高、适合企业需求的开源软件。

  • 他的粉丝

    Kafka设计解析(八)- Kafka事务机制与Exactly Once语义实现原理

    作者 郭俊 关注 95 他的粉丝 发布于  2017年11月22日

    本文介绍了Kafka实现事务性的几个阶段——正好一次语义与原子操作。之后详细分析了Kafka事务机制的实现原理,并介绍了Kafka如何处理事务相关的异常情况,如Transaction Coordinator宕机。最后介绍了Kafka的事务机制与PostgreSQL的MVCC以及Zookeeper的原子广播实现事务的异同

他的粉丝

基于Kafka Streams构建广告消耗预测系统

作者 Boyang Chen 关注 0 他的粉丝 ,译者 谢健芬 关注 0 他的粉丝   发布于  2017年11月9日

Kafka Streams是2016年发布的Apache Kafka 0.10版本中引入的一个新Feature,提供了对存储于Kafka内的数据进行流式处理和分析的功能。与Spark、Storm等流式框架相比,Kafka Streams具备低延迟和轻量级等特点,使得它在特定业务场景(比如本文所介绍的广告消耗预测)中成为更理想的流式框架的选择。

他的粉丝

在生产环境使用Kafka构建和部署大规模机器学习

作者 Kai Waehner 关注 0 他的粉丝 ,译者 薛命灯 关注 23 他的粉丝   发布于  2017年11月8日

资深顾问Kai Waehner在Confluent上介绍了如何使用Kafka在生产环境构建大规模机器学习。

他的粉丝

纽约时报Kafka架构实战

作者 Boerge Svingen 关注 0 他的粉丝 ,译者 薛命灯 关注 23 他的粉丝   发布于  2017年10月20日

纽约时报的Boerge Svingen在这篇文章里介绍了拥有161年历史和21年在线内容发布经验的纽约时报是如何基于Kafka改造他们的发布系统的。

他的粉丝

Kafka数据可靠性深度解读

作者 朱忠华 关注 9 他的粉丝 发布于  2017年9月12日

Kafka作为一个商业级消息中间件,消息可靠性的重要性可想而知。如何确保消息的精确传输?如何确保消息的准确存储?如何确保消息的正确消费?这些都是需要考虑的问题。本文首先从Kafka的架构着手,先了解下Kafka的基本原理,然后通过对kakfa的存储机制、复制原理、同步原理、可靠性和持久性保证等等一步步对其可靠性进行分析,最后通过benchmark来增强对Kafka高可靠性的认知。 8

他的粉丝

Kafka设计解析(七)- 流式计算的新贵 Kafka Stream

作者 郭俊 关注 95 他的粉丝 发布于  2017年8月3日

本文介绍了Kafka Stream的背景,如Kafka Stream是什么,什么是流式计算,以及为什么要有Kafka Stream。接着介绍了Kafka Stream的整体架构,并行模型,状态存储,以及主要的两种数据集KStream和KTable。并且分析了Kafka Stream如何解决流式系统中的关键问题。最后结合示例讲解了如何使用Kafka Stream。 2

他的粉丝

Kafka设计解析(六)- Kafka高性能关键技术解析

作者 郭俊 关注 95 他的粉丝 发布于  2017年3月30日

本文从宏观架构层面和微观实现层面分析了Kafka如何实现高性能。包含Kafka如何利用Partition实现并行处理和提供水平扩展能力,如何通过ISR实现可用性和数据一致性的动态平衡,如何使用NIO和Linux的sendfile实现零拷贝以及如何通过顺序读写和数据压缩实现磁盘的高效利用。

他的粉丝

京东消息中间件JMQ:架构,与Kafka的对比,主要特性和应用场景

作者 丁俊 关注 1 他的粉丝 发布于  2016年10月13日

JMQ是京东自主研发的一款消息中间件系统,具有高可用、数据高可靠等特性。广泛应用于公司内部系统,包括订单、支付、库房等场景。 4

他的粉丝

Kafka和DistributedLog技术对比

作者 Sijie Guo 关注 1 他的粉丝 ,译者 足下 关注 1 他的粉丝   发布于  2016年9月28日

Kafka和DistributedLog都是设计来处理日志流相关问题的。它们有相似性,但在存储和复制机制上有着不同的设计理念,因此有了不同的实现方式。这篇文章试图从技术角度解释清楚它们的区别,并回答一些问题。

他的粉丝

Yelp的实时流技术之二:将MySQL表数据变更实时流到Kafka中

作者 Prem Santosh Udaya Shankar 关注 0 他的粉丝 ,译者 足下 关注 1 他的粉丝   发布于  2016年9月12日

这一篇中介绍的是MySQLStreamer,它从MySQL二进制文件中提取所有的数据变更操作事件,再把这些事件发布到Kafka中。

登陆InfoQ,与你最关心的话题互动。


找回密码....

Follow

关注你最喜爱的话题和作者

快速浏览网站内你所感兴趣话题的精选内容。

Like

内容自由定制

选择想要阅读的主题和喜爱的作者定制自己的新闻源。

Notifications

获取更新

设置通知机制以获取内容更新对您而言是否重要

BT