| 共 35 篇文章 |
|
五大存储模型关系模型、键值存储、文档存储、列式存储、图形数据库。数据库市场需要细分，行式数据库不再满足所有的需求，而有很多需求需要通过本内存数据库和列式数据库解决，列式数据库在数据分析、海量存储、BI这三个领域有自己独到。文档存储支持对结构化数据的访问，不同于关系模型的是，文档存储没有强制的架构。事实上，文档存储以封包... 阅904 转8 评0 公众公开 15-12-18 20:34 |
腾讯CKV海量分布式存储系统。Access根据业务的tid找出相应的路由表，对key进行sharding，把key映射为一个shard ID，然后在路由表中找出key所属的shard位于的Cache地址；容量扩容除了能够增加表的容量外，将shard分散到更多的Cache机器，或者将shard迁移到负载低的Cache机器上，能够实现表的整体性能提升。如果主备Cache都死了，只要Cache磁盘的... 阅2649 转7 评0 公众公开 15-12-18 18:35 |
Berkeley DB是一个开源的文件数据库，介于关系数据库与内存数据库之间，使用方式与内存数据库类似，它提供的是一系列直接访问数据库的函数，而不是像关系数据库那样需要网络通讯、SQL解析等步骤。Cassandra的主要特点就是它不是一个数据库，而是由一堆数据库节点共同构成的一个分布式网络服务，对Cassandra 的一个写操作，会被复制到其它节点上... 阅114 转2 评0 公众公开 15-12-18 18:34 |
也就是每个存储节点中包含有多个虚拟节点，迁移数据时可以以虚拟节点为单位进行迁移，源存储节点中若干个虚拟节点下的所有key迁移到目的存储节点中并且修改虚拟节点和存储节点的映射关系。当节点3加入集群后，将节点3对应的虚拟节点映射到hash环上，只有原本映射到节点3虚拟节点顺时针第一个虚拟节点的部分数据会被重新映射到节点3的虚拟节点中... 阅158 转2 评0 公众公开 15-12-18 18:34 |
ScaleScale-up（纵向扩展）和Scale-out（横向扩展）的解释。Scale vertically (scale up) To scale vertically (or scale up) means to add resources to a single node in a system, typically involving the addition of CPUs or memory to a single computer. 阅54 转0 评0 公众公开 15-12-17 20:26 |
ScaleScale-up（纵向扩展）和Scale-out（横向扩展）的解释。Scale vertically (scale up) To scale vertically (or scale up) means to add resources to a single node in a system, typically involving the addition of CPUs or memory to a single computer. 阅78 转0 评0 公众公开 15-12-17 20:07 |
全球级的分布式数据库 Google Spanner原理。EMC中国研究院实时紧盯业界动态，Google最近发布的一篇论文《Spanner: Google’s Globally-Distributed Database》, 笔者非常感兴趣，对Spanner进行了一些调研，并在这里分享。由于Spanner并不是开源产品，笔者的知识主要来源于Google的公开资料，通过现有公开资料仅仅只能窥得Spanner的沧海一粟，Sp... 阅23 转0 评0 公众公开 15-12-17 15:15 |
Ceph：一个 Linux PB 级分布式文件系统联系 Tim.Ceph 生态系统可以大致划分为四部分（见图 1）：客户端（数据用户），元数据服务器（缓存和同步分布式元数据），一个对象存储集群（将数据和元数据作为对象存储，执行其他关键职能），以及最后的集群监视器（执行监视功能）。Ceph Client 是 Ceph 文件系统的用户。Ceph Metadata Daemon 提供了元... 阅26 转1 评0 公众公开 15-12-15 19:02 |
从演讲回顾：阿里云存储技术的演进，以及云服务用例最佳实践中了解到阿里云是基于自家的“盘古”系统，那么从实际使用来说，远没达到一般的分布式块存储系统的要求。Ceph是开源实现的PB级分布式文件系统，其分布式对象存储机制为上层提供了文件接口、块存储接口和对象存储接口。这些都说明了，无论是目前的存储厂商还是开源社区都在极力推动整... 阅43 转0 评0 公众公开 15-12-07 21:43 |
【转载】Why Ceph and how to use Ceph | 云里雾里。Rados本身就是一个对象存储接口，它自身维护了一个集群状态和实现了数据分发的要求，我们通常也讲Rados称为Ceph Cluster，因为其上的存储接口如CephFS都是基于其上的接口实现而已。2. ceph-fuse: 通过ceph-fuse可以从用户态空间挂载CephFS如”ceph-fuse -m 192.168.0.1:6789 /home/username/... 阅113 转0 评0 公众公开 15-12-07 21:36 |
