Перейти к основному содержимому

3.5. Recon

Компоненты Apache Ozone: Recon​

Recon — это компонент Apache Ozone, предназначенный для мониторинга, анализа данных и управления кластером. Recon предоставляет удобный веб-интерфейс для визуализации состояния кластера, информации о DataNodes, контейнерах и репликах. Он помогает администраторам отслеживать производительность и доступность, а также выявлять и устранять проблемы с данными и узлами.

1. Основные функции Recon​

  1. Мониторинг состояния кластера:

    • Отображение состояния узлов DataNode.
    • Отслеживание контейнеров и реплик для обеспечения надёжности данных.
    • Информация о дисковом пространстве и загрузке узлов.

  2. Веб-интерфейс для мониторинга:

    • Удобная визуализация состояния кластера через веб-консоль.
    • Доступ к метрикам производительности и журналам событий.

  3. Отчёты о данных и репликах:

    • Выявление недостающих реплик.
    • Отчёты о неконсистентных контейнерах.

  4. Поиск и анализ данных:

    • Recon индексирует данные и метаданные, упрощая их поиск.
    • Поддержка запросов для анализа состояния кластера и выполнения диагностики.

2. Запуск и остановка Recon​

Запуск Recon​

Выполните следующую команду для запуска Recon:

bin/ozone recon --daemon start

Остановка Recon​

Для остановки Recon используйте команду:

bin/ozone recon --daemon stop

Проверка статуса Recon​

Вы можете проверить статус всех запущенных служб, включая Recon:

bin/ozone admin service list

3. Конфигурация Recon​

Настройка Recon выполняется в файле ozone-site.xml. Пример конфигурации:

<configuration>
  <!-- Адрес и порт Recon -->
  <property>
    <name>ozone.recon.address</name>
    <value>0.0.0.0:9888</value>
  </property>

  <!-- Интервал синхронизации данных -->
  <property>
    <name>ozone.recon.synchronization.interval</name>
    <value>10m</value>
  </property>

  <!-- Включение аутентификации -->
  <property>
    <name>ozone.recon.security.enabled</name>
    <value>false</value> <!-- Установите true для включения аутентификации -->
  </property>
</configuration>
  • ozone.recon.address: Указывает IP-адрес и порт, на котором будет работать Recon.
  • ozone.recon.synchronization.interval: Интервал, через который Recon синхронизирует данные с SCM и OM.
  • ozone.recon.security.enabled: Включает аутентификацию для веб-интерфейса Recon.

4. Доступ к веб-интерфейсу Recon​

После запуска Recon веб-интерфейс будет доступен по адресу:

http://<hostname>:9888

Через веб-консоль вы можете:

  • Просматривать состояние узлов DataNode.
  • Отслеживать статус репликации контейнеров.
  • Получать отчёты о неконсистентных контейнерах и недостающих репликах.

5. Мониторинг и управление через Recon​

  1. Просмотр состояния DataNodes:

    • Вы можете увидеть все доступные узлы DataNode, их статус и доступное дисковое пространство.

  2. Отчёты о репликации и контейнерах:

    • Recon предоставляет список контейнеров и состояние их реплик, включая информацию о неконсистентных контейнерах.

  3. Уведомления о проблемах в кластере:

    • Recon генерирует уведомления о недоступных DataNodes, недостающих репликах и других проблемах с данными.

6. Управление контейнерами и репликами через Recon​

  • Просмотр списка контейнеров:

    bin/ozone admin container list --recon

  • Просмотр информации о репликах контейнера:

    bin/ozone admin container info <container-id> --recon

  • Восстановление недостающих реплик: Если Recon обнаружил недостающие реплики, можно инициировать их восстановление через SCM:

    bin/ozone admin container recover <container-id>

7. Просмотр логов Recon​

Логи Recon находятся в директории /var/log/ozone/. Чтобы отслеживать логи в реальном времени, используйте команду:

tail -f /var/log/ozone/recon.log

8. Обеспечение безопасности и аутентификации в Recon​

Если требуется ограничить доступ к веб-интерфейсу Recon, включите аутентификацию в конфигурации ozone-site.xml:

<property>
  <name>ozone.recon.security.enabled</name>
  <value>true</value>
</property>

После этого доступ к веб-интерфейсу будет возможен только после ввода имени пользователя и пароля.

9. Резюме​

Recon — это мощный инструмент для мониторинга, анализа и управления кластером Apache Ozone. Он предоставляет удобный веб-интерфейс для отслеживания состояния узлов, реплик и контейнеров. Recon упрощает диагностику проблем и помогает администраторам поддерживать стабильную и надёжную работу кластера Ozone, автоматически обнаруживая проблемы и предлагая решения для восстановления.