Обработка больших данных
Отрывок из книги
На базе идей MapReduce и вдохновлённый публикациями Google, Дуг Каттинг и Майк Кафкарелла начали работу над проектом с открытым исходным кодом, который в итоге стал известен как Hadoop. Первоначально Hadoop был создан как часть проекта Nutch – поисковой системы, также разрабатываемой Дугом Каттингом, – однако вскоре Hadoop выделился в отдельный проект, полностью сосредоточенный на хранении и обработке больших данных. Одним из первых пользователей и активных участников разработки Hadoop стала компания Yahoo, которая в 2006 году внедрила его для своих задач, связанных с обработкой огромных объёмов веб-данных.
Одним из ключевых компонентов Hadoop стала распределённая файловая система HDFS (Hadoop Distributed File System). HDFS была разработана для того, чтобы решать проблемы хранения и управления данными в распределённых системах. Основная идея HDFS заключалась в том, чтобы хранить данные не на одном сервере, а распределять их по множеству серверов в кластере, что обеспечивало высокую надёжность и отказоустойчивость. В случае выхода из строя одного из серверов данные не терялись, так как они были дублированы на других узлах кластера. HDFS также обеспечивала эффективное распределение данных между узлами и позволяла параллельно обрабатывать их с помощью MapReduce.
У нас есть только неполная версия книги.
Книги из серии:
Без серии
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
[5.0 рейтинг книги]
Комментарии:
Популярные книги
На границе империй. Том 9. Часть 5
18. Фортуна дама переменчивая
Фантастика
:космическая фантастика
,попаданцы
.
5.00
рейтинг книги
Сильнейший Столп Империи. Книга 5
5. Сильнейший Столп Империи
Фантастика
:аниме
,фэнтези
,фантастика: прочее
,попаданцы
.
5.00
рейтинг книги
Сборник коротких эротических рассказов
Любовные романы
:эро литература
,love action
.
7.41
рейтинг книги
Сердце Дракона. Том 8
8. Сердце дракона
Фантастика
:фэнтези
,героическая фантастика
,боевая фантастика
.
7.53
рейтинг книги
Точка Бифуркации III
3. ТБ
Фантастика
:фэнтези
,попаданцы
,аниме
.
5.00
рейтинг книги
Последний Паладин. Том 7
7. Путь Паладина
Фантастика
:фэнтези
,попаданцы
,аниме
.
5.00
рейтинг книги
Шайтан Иван
1. Шайтан Иван
Фантастика
:боевая фантастика
,попаданцы
,альтернативная история
.
5.25
рейтинг книги
На границе империй. Том 10. Часть 3
Вселенная EVE Online
Фантастика
:боевая фантастика
,космическая фантастика
,попаданцы
.
5.00
рейтинг книги
Сирота
1. Помещик
Фантастика
:альтернативная история
.
5.71
рейтинг книги
Здравствуй, 1985-й
2. Девяностые
Фантастика
:альтернативная история
.
5.33
рейтинг книги
Древесный маг Орловского княжества 9
9. Орловское княжество
Фантастика
:аниме
,фэнтези
,попаданцы
.
5.00
рейтинг книги
Брак по-драконьи
Фантастика
:фэнтези
.
8.60
рейтинг книги
Я все еще царь. Книга XXXI
31. Дорогой барон!
Фантастика
:юмористическое фэнтези
,аниме
,попаданцы
.
5.00
рейтинг книги
На границе империй. Том 4
4. Фортуна дама переменчивая
Фантастика
:космическая фантастика
.
6.00
рейтинг книги
Древесный маг Орловского княжества
1. Орловское княжество
Фантастика
:аниме
,фэнтези
,фантастика: прочее
,попаданцы
.
5.00
рейтинг книги
Дневники 1928-1929
Документальная литература
:биографии и мемуары
.
5.00
рейтинг книги
Чужая семья генерала драконов
6. Генералы драконов
Фантастика
:фэнтези
.
5.25