Google File System
Google File System (GFS) — распределенная файловая система, созданная компанией Google в 2000 году для своих внутренних потребностей. Используемая реализация является коммерческой тайной компании Google, однако общие принципы построения системы были опубликованы в 2003 году.[1] Несовместима с POSIX, тесно интегрирована с MapReduce. Обновленная GFS второй версии (2009 год) имеет кодовое название Colossus.[2]
GFS — кластерная система, оптимизированная для центрального хранилища данных Google и нужд поискового механизма, обладающая повышенной защитой от сбоев. Система предназначена для взаимодействия между вычислительными системами, а не между пользователем и вычислительной системой.
Вся информация копируется и хранится в трёх (или более) местах одновременно, при этом система способна очень быстро находить реплицированные копии, если какая-то машина вышла из строя. Задачи автоматического восстановления после сбоя решаются с помощью программ, созданных по модели MapReduce.
В GFS файлы делятся на блоки данных (англ. chunk — кусок) по 64 МБ (в первой версии, ориентированной на обслуживание поисковых индексов) или по 1 МБ (в более универсальной GFS 2.0)[2]. При разработке ФС предполагалось, что файлы очень редко переписываются или уменьшаются в размере хранимых данных, а лишь читаются или увеличиваются в размере посредством добавления в конец новых данных.
Один из создателей — Говард Гобьов.[3]
Примечания
- ↑ The Google File System Архивная копия от 2 декабря 2017 на Wayback Machine // 19th Symposium on Operating Systems Principles, 2003
- ↑ 1 2 Файловая система Google: колосс против информационного слона Архивная копия от 7 сентября 2013 на Wayback Machine // «Компьютерра-Онлайн», 04 сентября 2013
- ↑ Object Storage: можно ли прожить без файлов? Архивная копия от 21 декабря 2012 на Wayback Machine // «Компьютерра-Онлайн», 23 ноября 2012 года
Литература
- Ghemawat, Sanjay; Gobioff, Howard & Leung, Shun-Tak (2003), The Google File System, 19th Symposium on Operating Systems Principles, Lake George, NY: The Association for Computing Machinery, CiteSeerX:10.1.1.125.789, <http://research.google.com/archive/gfs.html>.
Ссылки
- Распределенная файловая система GFS, 29 октября 2009
- GFS: Evolution on Fast-forward, by Marshall Kirk McKusick, Sean Quinlan, August 1, 2009
 | Это статья-заготовка о программном обеспечении. Помогите РУВИКИ, дополнив эту статью, как и любую другую. |
| |
| Реклама | |
| Коммуникации | |
| ПО | |
| Платформы | |
| Инструменты разработки | |
| Публикация | |
| Поиск (PageRank) | |
| Тематические проекты | |
| Закрытые проекты | |
| См. также | |
| Дисковые |
| ||||||
|---|---|---|---|---|---|---|---|
| Распределённые (сетевые) | |||||||
| Специальные |
| ||||||