Русская Википедия:Google File System

Материал из Онлайн справочника
Перейти к навигацииПерейти к поиску

Google File System (GFS) — распределенная файловая система, созданная компанией Google в 2000 году для своих внутренних потребностей. Используемая реализация является коммерческой тайной компании Google, однако общие принципы построения системы были опубликованы в 2003 году.[1] Несовместима с POSIX, тесно интегрирована с MapReduce. Обновленная GFS второй версии (2009 год) имеет кодовое название Colossus.[2]

GFS — кластерная система, оптимизированная для центрального хранилища данных Google и нужд поискового механизма, обладающая повышенной защитой от сбоев. Система предназначена для взаимодействия между вычислительными системами, а не между пользователем и вычислительной системой.

Вся информация копируется и хранится в трёх (или более) местах одновременно, при этом система способна очень быстро находить реплицированные копии, если какая-то машина вышла из строя. Задачи автоматического восстановления после сбоя решаются с помощью программ, созданных по модели MapReduce.

В GFS файлы делятся на блоки данных (Шаблон:Lang-en — кусок) по 64 МБ (в первой версии, ориентированной на обслуживание поисковых индексов) или по 1 МБ (в более универсальной GFS 2.0)[2]. При разработке ФС предполагалось, что файлы очень редко переписываются или уменьшаются в размере хранимых данных, а лишь читаются или увеличиваются в размере посредством добавления в конец новых данных.

Один из создателей — Говард Гобьов.[3]

Примечания

Шаблон:Примечания

Литература

Шаблон:Refend

Ссылки

Шаблон:Filesystem-stub

Шаблон:Google Шаблон:Файловые системы

  1. The Google File System Шаблон:Wayback // 19th Symposium on Operating Systems Principles, 2003
  2. 2,0 2,1 Файловая система Google: колосс против информационного слона Шаблон:Wayback // «Компьютерра-Онлайн», 04 сентября 2013
  3. Object Storage: можно ли прожить без файлов? Шаблон:Wayback // «Компьютерра-Онлайн», 23 ноября 2012 года