- 博客(7)
- 收藏
- 关注
RSS订阅翻译 [翻译]HBase 架构101 –预写日志系统 (WAL)
HBase 架构101 –预写日志系统 (WAL)什么是预写日志WAL? 之前的文章我们简单介绍了HBase的存储结构。其中提到了预写日志。这里，我们要介绍它的实现细节，所有的描述都基于HBase 0.20.3.WAL最重要的作用是灾难恢复。和MySQL 的BIN log类似，它记录所有的数据改动。一旦服务器崩溃，通过重放log，我们可以恢复崩溃之前的数据。这也意味如果写入WAL失败，整个操作将认为失败。我们先看看HBase是如何做到的。首先，客户端初始化一个可能对数据改动的操作，如put(Put),del
2010-07-23 09:06:00
6104
翻译 HBase存储架构
<br /> <br />英文原文：http://www.larsgeorge.com/2009/10/hbase-architecture-101-storage.html<br /> <br />HBase最隐秘的问题之一就是它的数据是如何存储的。虽然大多数用户都不会因为这个问题向你抱怨，但是如果你想学习哪些高级的配置选项并了解它们的意思，你可能就需要来了解一下这个存储问题了。“怎样才能把HBase调整到最适合我需求的状态？”你可能对于这样一系列类似的问题非常感兴趣。那么你就需要绕过这些问题来学习HBa
2010-07-22 16:09:00
5461
4
翻译 HBase 数据文件在HDFS上的存储
英文原文：http://www.larsgeorge.com/search/label/hbase在HDFS上面最不明确的事情之一就是数据的冗余。它完全是自动进行的，因为无法得知其中详细的信息，我们需要做的就是相信它。HBase完全相信HDFS存储数据的安全性和完整性，并将数据文件交给HDFS存储。正是因为HDFS的数据冗余方式对于HBase来说是完全透明的，产生了一个问题：HBase的效率会受到多大的影响？说的简单一点，当HBase需要存取数据时，如何保证有一份冗余的数据块离自己最近？当我们对HBase做
2010-07-16 17:18:00
5522
1
原创 存储模式之争 RP vs OPP
在分布式存储数据库的世界中，无论是基于Key/Value的数据库还是Column Base的数据库，都有一个重要的因子——Key，或者叫RowKey。我们总是根据Key来快速的获取存储的数据。毫不夸张的说，Key是读数据的基础。对于Key的存储，有两种截然不同的分布方式，我们称之为：随机分布（RP）和顺序分布（OPP）RP和OPP之间并没有绝对的优劣，但遗憾的是任何数据库只能选择其中的一种。在这篇文章中我们希望能够讨论一下两种方式的优劣，经典数据库的选择和我们的选择。我们先来讨论OPP，因为我们可能更喜欢这
2010-06-09 19:30:00
1533
2
原创 Bigtable Notes
<!-- /* default css */table { font-size: 1em; line-height: inherit; border-collapse: collapse;}tr { text-align: left; }div, address, ol, ul, li, option, select {
2010-05-04 23:09:00
1938
1
原创 HBase源代码分析1 - Row Lock
<!-- /* default css */table { font-size: 1em; line-height: inherit; border-collapse: collapse;}tr { text-align: left; }div, address, ol, ul, li, option, select
2010-05-04 22:56:00
3386
1
原创 写在博客开篇之际
这是一个充满激情的团队，他们来自于趋势科技中国研发中心，他们致力于研发基于云端的分布式存储和计算平台，他们总是忙于追逐最新的知识和技术，他们总是在学习和争论中解决一个又一个难题，他们希望能在这里分享自己的经验，让更多人看到辛勤汗水浇灌出的花朵，在博客开篇之际他们有一个小小的愿望，当云彩布满天空的时候，可以看到他们劳动的成果在其中闪耀着光芒……
2010-05-04 20:20:00
790
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人