merryme的博客

本文通过对 Hadoop 的深入分析和研究，根据交易记录查询系统的需求，设计并实现了 基于 Hadoop 的海量交易记录查询系统。首先对 Hadoop 及其相关技术做了研究，着重介绍了 Hadoop 云计算框架中的 HDFS 分布式文件系统和 HBase 分布式数据库，分别介绍了 HDFS 的特性、系统框架、副本存放策略和 HBase 的系统框架及数据模型。其次，重点分析了 HBase 的存储特点，通过分析 HBase 的数据存储方式、Region 定位方式和写数据过程，提出了系统 设计的优化和改进建议。接着，对基于 Hadoop 的海量交易记录查询系统进行了设计和实现， 主要包括数据接入层、存储层和查询层；为了解决集群中节点时间不同步的问题，设计并实 现了 TSS 时间同步子系统。最后，通过具体的测试用例对系统进行功能测试和性能测试，并 对测试结果进行了分析，验证了系统的可行性和正确性。