Обработка больших данных
Отрывок из книги
На базе идей MapReduce и вдохновлённый публикациями Google, Дуг Каттинг и Майк Кафкарелла начали работу над проектом с открытым исходным кодом, который в итоге стал известен как Hadoop. Первоначально Hadoop был создан как часть проекта Nutch – поисковой системы, также разрабатываемой Дугом Каттингом, – однако вскоре Hadoop выделился в отдельный проект, полностью сосредоточенный на хранении и обработке больших данных. Одним из первых пользователей и активных участников разработки Hadoop стала компания Yahoo, которая в 2006 году внедрила его для своих задач, связанных с обработкой огромных объёмов веб-данных.
Одним из ключевых компонентов Hadoop стала распределённая файловая система HDFS (Hadoop Distributed File System). HDFS была разработана для того, чтобы решать проблемы хранения и управления данными в распределённых системах. Основная идея HDFS заключалась в том, чтобы хранить данные не на одном сервере, а распределять их по множеству серверов в кластере, что обеспечивало высокую надёжность и отказоустойчивость. В случае выхода из строя одного из серверов данные не терялись, так как они были дублированы на других узлах кластера. HDFS также обеспечивала эффективное распределение данных между узлами и позволяла параллельно обрабатывать их с помощью MapReduce.
У нас есть только неполная версия книги.
Книги из серии:
Без серии
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
Комментарии:
Популярные книги
Неудержимый. Книга IV
4. Неудержимый
Фантастика
:фэнтези
,попаданцы
,аниме
.
5.00
рейтинг книги
Третий Генерал: Том VI
5. Третий Генерал
Фантастика
:городское фэнтези
,аниме
,сказочная фантастика
,попаданцы
,гаремник
.
5.00
рейтинг книги
Искатель 2
2. Валинор
Фантастика
:фэнтези
,попаданцы
,рпг
.
5.00
рейтинг книги
Наша навсегда
2. Наша
Любовные романы
:современные любовные романы
,эро литература
.
5.00
рейтинг книги
Как я строил магическую империю 10
10. Как я строил магическую империю
Фантастика
:попаданцы
,аниме
,фантастика: прочее
.
5.00
рейтинг книги
Бастард Императора. Том 3
3. Бастард Императора
Фантастика
:попаданцы
,аниме
,фэнтези
.
5.00
рейтинг книги
Неудержимый. Книга XXIX
29. Неудержимый
Фантастика
:попаданцы
,аниме
,фэнтези
,фантастика: прочее
.
5.00
рейтинг книги
Низший - Инфериор. Компиляция. Книги 1-19
Фантастика 2023. Компиляция
Фантастика
:боевая фантастика
.
5.00
рейтинг книги
Измена. Свадьба дракона
Любовные романы
:любовно-фантастические романы
,эро литература
.
5.00
рейтинг книги
Стеллар. Заклинатель
3. Стеллар
Фантастика
:боевая фантастика
.
8.40
рейтинг книги
Измена. Право на любовь
1. Измены
Любовные романы
:современные любовные романы
.
5.00
рейтинг книги
Бестужев. Служба Государевой Безопасности
1. Граф Бестужев
Фантастика
:фэнтези
,попаданцы
,аниме
.
5.00
рейтинг книги
Как я строил магическую империю 5
5. Как я строил магическую империю
Фантастика
:попаданцы
,аниме
,фантастика: прочее
,фэнтези
.
5.00
рейтинг книги
Владыка морей ч.1
10. Третий Рим
Фантастика
:попаданцы
,альтернативная история
.
5.00
рейтинг книги
Варяг
1. Варяг
Фантастика
:альтернативная история
.
9.10
рейтинг книги
Локки 4 Потомок бога
4. Локки
Фантастика
:аниме
,фэнтези
.
5.00
рейтинг книги
Антимаг его величества. Том IV
4. Модификант
Фантастика
:фэнтези
,попаданцы
,аниме
.
5.00