BT

如何利用碎片时间提升技术认知与能力? 点击获取答案

  • 他的粉丝

    深入浅出时序数据库之分级存储

    作者 百度云时序数据库资深工程师 关注 14 他的粉丝 发布于  2017年7月26日

    物联网领域近期如火如荼,互联网和传统公司争相布局物联网。作为物联网领域数据存储的首选,时序数据库也越来越多进入人们的视野,而早在2016年7月,百度云在其天工物联网平台上发布了国内首个多租户的分布式时序数据库产品TSDB,成为支持其发展制造,交通,能源,智慧城市等产业领域的核心产品,同时也成为百度战略发展产业物联网的标志性事件。 前文提到低成本的存储是时序数据库需要解决的一个主要问题,而上一篇文章介绍了通过针对时序数据的压缩方法,从利用数据本身特征的方面,降低时序数据的存储成本。 本文将介绍通过对数据进行分级存储,从使用不同存储介质,以及减少数据的副本数的方面,介绍如何在保证时序数据的查询性能的前提下,降低时序数据的存储成本。

  • 他的粉丝

    万亿级日志与行为数据存储查询技术剖析

    作者 王劲 关注 1 他的粉丝 发布于  2017年2月22日 2

    近些年,大数据背后的价值也开始得到关注和重视,越来越多的企业开始保存和分析数据,希望从中挖掘大数据的价值。大数据产生的根本还是增量数据,单纯的用户数据不足以构成大数据,然而用户的行为或行为相关的日志的数据量,加之随着物联网的发力,产生的增量数据将不可预估,存储和查询增量数据尤为关键。

  • 他的粉丝

    微信PaxosStore内存篇:十亿Paxos/分钟的挑战

    作者 魏澄 关注 0 他的粉丝 发布于  2016年12月28日

    内存云作为微信PaxosStore存储体系的组成部分,目前存储着微信基础账号、消息计数等核心用户数据,每天峰值请求高达数十亿/分钟,本文将向大家分享内存云的Paxos改造过程。

他的粉丝

基于Raft构建弹性伸缩的存储系统的一些实践

作者 黄东旭 关注 10 他的粉丝 发布于  2016年8月11日

最近几年来,越来越多的文章介绍了 Raft 或者 Paxos 这样的分布式一致性算法,但主要集中在算法细节和日志同步方面的应用,但是呢,这些算法的潜力并不仅限于此,基于这样的分布式一致性算法构建一个完整的可弹性伸缩的高可用的大规模存储系统,是一个很新的课题,我结合我们这一年多以来在 TiKV 这样一个大规模分布式数据库的实践上谈谈其中的一些设计和挑战。

他的粉丝

剖析Elasticsearch集群系列第一篇 Elasticsearch的存储模型和读写操作

作者 Ronak Nathani 关注 1 他的粉丝 ,译者 韩陆 关注 11 他的粉丝   发布于  2016年7月11日

剖析Elasticsearch集群系列涵盖了当今最流行的分布式搜索引擎Elasticsearch的底层架构和原型实例。 本文是这个系列的第一篇,在本文中,我们将讨论的Elasticsearch的底层存储模型及CRUD(创建、读取、更新和删除)操作的工作原理。 4

他的粉丝

云计算中的 NAS

作者 袁冬 关注 0 他的粉丝 发布于  2015年9月11日

NAS是传统存储行业重要的组成部分,基于SMB、CIFS提供支持POSIX协议的文件共享服务,是所有传统存储厂商都提供的产品,甚至是必须提供的产品。但似乎所有的云服务似乎都对这种共享存储的形式置若罔闻,AWS推出滞后,Azure没有,GAE没有,阿里云当然也没有。OpenStack有一个Manila,但是半死不活。是不是NAS在云时代,已经死了? 1

他的粉丝

etcd:从应用场景到实现原理的全方位解读

作者 孙健波 关注 29 他的粉丝 发布于  2015年1月31日

本文将从etcd的应用场景开始,深入解读etcd的实现方式,以供开发者们更为充分地享用etcd所带来的便利。 2

他的粉丝

SLIK:高扩展、低延时的键值存储索引实现(RAMCloud)

作者 王豪迈 关注 0 他的粉丝 发布于  2014年7月1日

在阅读这篇论文之前建议首先了解RAMCloud重要的存储格式论文Log-structured Memory for DRAM-based Storage,在这篇里面会以这个为基础,也可以参考本博的简要介绍FAST 14 论文推荐(上),这篇论文是FAST 14的最佳论文。

他的粉丝

存储系统的那些事

作者 许式伟 关注 2 他的粉丝 发布于  2014年6月10日

存储系统从其与生俱来的使命来说,就难以摆脱复杂系统的魔咒。无论是从单机时代的文件系统,还是后来C/S或B/S结构下数据库这样的存储中间件兴起,还是如今炙手可热的云存储服务来说,存储都很复杂,而且是越来越复杂。 10

他的粉丝

HDFS集中式的缓存管理原理与代码剖析

作者 梁堰波 关注 0 他的粉丝 发布于  2014年4月26日

Hadoop 2.3.0已经发布了,其中最大的亮点就是集中式的缓存管理(HDFS centralized cache management)。这个功能对于提升Hadoop系统和上层应用的执行效率与实时性有很大帮助,本文从原理、架构和代码剖析三个角度来探讨这一功能。 1

他的粉丝

大数据存取的选择:行存储还是列存储?

作者 袁萌 关注 0 他的粉丝 发布于  2012年7月4日

本文介绍了大规模数据存储的两种物理存储格式在磁盘上的布局,并分析了两种存储格式各自的优点和缺点,以及在产品设计过程中应避免的一些问题。 11

他的粉丝

云存储服务的可用性——从又拍网看云存储服务

作者 沈志华 关注 0 他的粉丝 发布于  2012年2月15日

“云”这个概念在今年非常的火热,2年前国内的云存储服务还只有又拍云存储一家,如今国内已不下十家,面对如此多的云服务商,选择云服务的标准成了大家比较关注的问题。我们很荣幸在InfoQ与大家交流一些心得。 7

登陆InfoQ,与你最关心的话题互动。


找回密码....

Follow

关注你最喜爱的话题和作者

快速浏览网站内你所感兴趣话题的精选内容。

Like

内容自由定制

选择想要阅读的主题和喜爱的作者定制自己的新闻源。

Notifications

获取更新

设置通知机制以获取内容更新对您而言是否重要

BT