BT

如何利用碎片时间提升技术认知与能力? 点击获取答案

rss
  • 他的粉丝

    深入浅出时序数据库之分级存储

    作者 百度云时序数据库资深工程师 关注 14 他的粉丝 发布于  2017年7月26日

    物联网领域近期如火如荼,互联网和传统公司争相布局物联网。作为物联网领域数据存储的首选,时序数据库也越来越多进入人们的视野,而早在2016年7月,百度云在其天工物联网平台上发布了国内首个多租户的分布式时序数据库产品TSDB,成为支持其发展制造,交通,能源,智慧城市等产业领域的核心产品,同时也成为百度战略发展产业物联网的标志性事件。 前文提到低成本的存储是时序数据库需要解决的一个主要问题,而上一篇文章介绍了通过针对时序数据的压缩方法,从利用数据本身特征的方面,降低时序数据的存储成本。 本文将介绍通过对数据进行分级存储,从使用不同存储介质,以及减少数据的副本数的方面,介绍如何在保证时序数据的查询性能的前提下,降低时序数据的存储成本。

  • 他的粉丝

    时序数据库深入浅出之存储篇

    作者 百度云时序数据库资深工程师 关注 14 他的粉丝 发布于  2017年6月1日 1

    2017 年时序数据库忽然火了起来。开年 2 月 Facebook 开源了 beringei 时序数据库;到了 4 月基于 PostgreSQL 打造的时序数据库 TimeScaleDB 也开源了,而早在 2016 年 7 月,百度云在其天工物联网平台上发布了国内首个多租户的分布式时序数据库产品 TSDB,成为支持其发展制造,交通,能源,智慧城市等产业领域的核心产品,同时也成为百度战略发展产业物联网的标志性事件。时序数据库作为物联网方向一个非常重要的服务,业界的频频发声,正说明各家企业已经迫不及待的拥抱物联网时代的到来。 本文会从时序数据库的基本概念、使用场景、解决的问题一一展开,最后会从如何解决时序数据存储这一技术问题入手进行深入分析。

  • 他的粉丝

    阿里Goldeneye业务监控平台之架构演进,如何实时处理100T+/天的日志量?

    作者 马国强 关注 0 他的粉丝 , 许琦 关注 0 他的粉丝 发布于  2017年4月11日

    文中所讲的三种架构版本的演进过程,是我们保持业务发展、系统性能和工作效率之间平衡的过程。反推这个过程,新的架构也适合之前的业务规模和场景,然而衡量一个架构的优劣不是兼容了历史,而是能预见未来。所以,我们在保持业务和技术均衡的基础上,结合对未来业务潜在的需求的思考,才产生了每一次架构的改进和升级。这些是黄金眼每位成员的集体智慧,供大家参考学习。

他的粉丝

万亿级日志与行为数据存储查询技术剖析

作者 王劲 关注 1 他的粉丝 发布于  2017年2月22日

近些年,大数据背后的价值也开始得到关注和重视,越来越多的企业开始保存和分析数据,希望从中挖掘大数据的价值。大数据产生的根本还是增量数据,单纯的用户数据不足以构成大数据,然而用户的行为或行为相关的日志的数据量,加之随着物联网的发力,产生的增量数据将不可预估,存储和查询增量数据尤为关键。 2

他的粉丝

微信PaxosStore内存篇:十亿Paxos/分钟的挑战

作者 魏澄 关注 0 他的粉丝 发布于  2016年12月28日

内存云作为微信PaxosStore存储体系的组成部分,目前存储着微信基础账号、消息计数等核心用户数据,每天峰值请求高达数十亿/分钟,本文将向大家分享内存云的Paxos改造过程。

他的粉丝

基于Raft构建弹性伸缩的存储系统的一些实践

作者 黄东旭 关注 10 他的粉丝 发布于  2016年8月11日

最近几年来,越来越多的文章介绍了 Raft 或者 Paxos 这样的分布式一致性算法,但主要集中在算法细节和日志同步方面的应用,但是呢,这些算法的潜力并不仅限于此,基于这样的分布式一致性算法构建一个完整的可弹性伸缩的高可用的大规模存储系统,是一个很新的课题,我结合我们这一年多以来在 TiKV 这样一个大规模分布式数据库的实践上谈谈其中的一些设计和挑战。

他的粉丝

剖析Elasticsearch集群系列第一篇 Elasticsearch的存储模型和读写操作

作者 Ronak Nathani 关注 1 他的粉丝 ,译者 韩陆 关注 11 他的粉丝   发布于  2016年7月11日

剖析Elasticsearch集群系列涵盖了当今最流行的分布式搜索引擎Elasticsearch的底层架构和原型实例。 本文是这个系列的第一篇,在本文中,我们将讨论的Elasticsearch的底层存储模型及CRUD(创建、读取、更新和删除)操作的工作原理。 4

他的粉丝

基于pglog的Ceph一致性存储问题

作者 吴东 关注 0 他的粉丝 发布于  2016年3月31日

分布式存储系统通常采用多副本的方式来保证系统的可靠性,而多副本之间如何保证数据的一致性就是系统的核心。Ceph号称统一存储,其核心RADOS既支持多副本,也支持纠删码。本文主要分析Ceph的多副本一致性协议。

他的粉丝

AWS系列:S3不仅仅是存储

作者 陈天 关注 2 他的粉丝 发布于  2015年12月22日

本文系InfoQ中文站向陈天的约稿,这是AWS系列文章的第二篇。在这篇文章里,介绍了尝试用 S3 创建公司内部的文件服务器,保存员工私人/共享文件,并以类似Dropbox的方式双向同步。

他的粉丝

深入分析Parquet列式存储格式

作者 梁堰波 关注 0 他的粉丝 发布于  2015年8月8日

Parquet是面向分析型业务的列式存储格式,由Twitter和Cloudera合作开发,2015年5月从Apache的孵化器里毕业成为Apache顶级项目,最新的版本是1.8.0。 2

登陆InfoQ,与你最关心的话题互动。


找回密码....

Follow

关注你最喜爱的话题和作者

快速浏览网站内你所感兴趣话题的精选内容。

Like

内容自由定制

选择想要阅读的主题和喜爱的作者定制自己的新闻源。

Notifications

获取更新

设置通知机制以获取内容更新对您而言是否重要

BT