Авторизация
Забыли пароль? Введите ваш е-мейл адрес. Вы получите письмо на почту со ссылкой для восстановления пароля.
После регистрации вы сможете задавать вопросы и писать свои ответы, получая за это бонусы. Все остальные функции на сайте доступны без регистрации.
Вы должны войти или зарегистрироваться, чтобы добавить ответ и получить бонусы.
Hadoop YARN (Yet Another Resource Negotiator) — это компонент Hadoop, который отвечает за управление ресурсами и планирование задач в кластере Hadoop. YARN был введен в Hadoop версии 2.x и является основой для выполнения различных рабочих нагрузок, таких как MapReduce, Spark, Tez и других.
YARN предоставляет абстракцию ресурсов кластера, позволяя приложениям запрашивать и использовать ресурсы (память и процессорное время) для выполнения задач. Он также отвечает за планирование и распределение задач по узлам кластера, управление и мониторинг выполнения задач, а также обеспечение отказоустойчивости и масштабируемости.
YARN состоит из двух основных компонентов: ResourceManager (RM) и NodeManager (NM). ResourceManager управляет ресурсами кластера и принимает запросы на выполнение задач от приложений. NodeManager управляет ресурсами на каждом узле кластера и выполняет задачи, назначенные ResourceManager.
В целом, Hadoop YARN позволяет эффективно использовать ресурсы кластера и обеспечивает гибкость в выполнении различных рабочих нагрузок на платформе Hadoop.