[搜文档]分布式存储 - 搜索结果

第12章　云存储

39 2024-12-25 《大规模分布式存储系统：原理解析与架构实战》

第12章　云存储 12.1　云存储的概念第12章　云存储 Google、Amazon、Microsoft等国外互联网巨头为我们描述了云计算的美妙场景：当云计算时代到来之时，不必在你的计算机上安装各种各样的软件，只需要访问“云”就可以了，互联网巨头将会像提供水电煤一样提供随时可用的计算能力。云存储是云计算的存储部分，并且可以作为一种服务提供给用户，...

1.2　Hadoop项目及其结构

60 2024-12-19 《Hadoop实战（第2版）》

1.2　Hadoop项目及其结构 1.2　Hadoop项目及其结构现在Hadoop已经发展成为包含很多项目的集合。虽然其核心内容是MapReduce和Hadoop分布式文件系统，但与Hadoop相关的Common、Avro、Chukwa、Hive、HBase等项目也是不可或缺的。它们提供了互补性服务或在核心层上提供了更高层的服务。图1-1是Hado...

2.3.4 ESX服务器存储网络概略

25 2024-12-28 《私有云计算：整合、虚拟化和面向服务的基础设施》

2.3.4　ESX服务器存储网络概略如果读者能坚持读到此处，在继续之前应该给自己一些鼓励，现在你已经完成ESX服务器网络化的第一步，接下来该着手解决ESX服务器存储网络化的基础问题了。这部分内容对应图2-2中的“互联点B和C”部分，也就是连接服务器模块与存储模块（直接连接或通过光纤连接）的部分。说明：互联点C通常不会采用光纤通道，服务器模块通过互联...

6.3　Windows Azure Storage

38 2024-12-25 《大规模分布式存储系统：原理解析与架构实战》

6.3　Windows Azure Storage 6.3.1　整体架构 6.3　Windows Azure Storage Windows Azure Storage（WAS）是微软开发的云存储系统，包括三种数据存储服务：Windows Azure Blob、Windows Azure Table、Windows Azure Queue。三种数据...

15.1. 数据分布的6种策略

19 2025-03-11 《一线架构师实践指南》

15.1. 数据分布的6种策略 15.1.1. 独立Schema (Separate-schema ) 15.1.2. 集中(Centralized ) 15.1.3. 分区（Partitioned ） 15.1.4. 复制（Replicated ） 15.1.5. 子集(Subset ) 15.1.6. 重组（Reorganized ） ...

19.2　Hadoop在eBay的应用

65 2024-12-19 《Hadoop实战（第2版）》

19.2　Hadoop在eBay的应用 19.2　Hadoop在eBay的应用 eBay是全球知名的个人和企业销售商品和提供服务的在线交易平台，是互联网上最受欢迎的购物网站之一。在eBay上存储着上亿种商品的信息，而且每天有数百万种的新商品增加，因此需要用云系统来存储和处理PB级别的数据，而Hadoop是个很好的选择。 Hadoop是建立在商业硬件...

9.3.2 日志的索引与存储

35 2025-03-18 《深入高可用系统原理与设计》

9.3.2 日志的索引与存储 1. 全文索引 Elastic Stack 2. 轻量化 Loki 3. 列式存储 ClickHouse 9.3.2 日志的索引与存储处理日志本来是件稀松平常的事情，但随着数据规模的增长，量变引发质变，高吞吐写入（GB/s）、低成本海量存储（PB 级别）以及亿级数据的实时检索（1 秒内），已成为软件工程领域最具挑...

3.6.3　异构系统

37 2024-12-25 《大规模分布式存储系统：原理解析与架构实战》

3.6.3　异构系统 3.6.3　异构系统传统数据库扩容与大规模存储系统的可扩展性有何区别呢？为了说明这一问题，我们首先定义同构系统，如图3-8所示。图　3-8　同构系统将存储节点分为若干组，每个组内的节点服务完全相同的数据，其中有一个节点为主节点，其他节点为备节点。由于同一个组内的节点服务相同的数据，这样的系统称为同构系统。同...

3.1.2　一致性

32 2024-12-25 《大规模分布式存储系统：原理解析与架构实战》

3.1.2　一致性 3.1.2　一致性由于异常的存在，分布式存储系统设计时往往会将数据冗余存储多份，每一份称为一个副本（replica/copy）。这样，当某一个节点出现故障时，可以从其他副本上读到数据。可以这么认为，副本是分布式存储系统容错技术的唯一手段。由于多个副本的存在，如何保证副本之间的一致性是整个分布式系统的理论核心。可以从两个角度理...

13.3　MapReduce扩展

52 2024-12-25 《大规模分布式存储系统：原理解析与架构实战》

13.3　MapReduce扩展 13.3.1　Google Tenzing 13.3　MapReduce扩展 MapReduce框架有效地解决了海量数据的离线批处理问题，在各大互联网公司得到广泛的应用。事实已经证明了MapReduce巨大的影响力，以至于引发了一系列的扩展和改进。这些扩展包括： ●Google Tenzing：基于MapRedu...

第12章 云存储

1.2 Hadoop项目及其结构

2.3.4 ESX服务器存储网络概略

6.3 Windows Azure Storage

15.1. 数据分布的6种策略

19.2 Hadoop在eBay的应用