Оглавление документации DataHubs Storage
-
Введение
1.1. Что такое Apache Ozone?
1.2. Основные особенности
1.3. Примеры использования -
Установка и настройка
2.1. Системные требования
2.2. Установка Ozone на одиночный узел
2.3. Установка Ozone в распределённой среде
2.4. Настройка конфигурационных файлов
2.5. Запуск и остановка Ozone -
Компоненты Apache Ozone
3.1. Ozone Manager (OM)
3.2. Storage Container Manager (SCM)
3.3. Datanode Service (DN)
3.4. S3 Gateway (S3G)
3.5. Recon
3.6. Роль и взаимодействие компонентов -
Основные концепции хранения данных
4.1. Пространства имен (Buckets и Volumes)
4.2. Файловые и объектные интерфейсы
4.3. Контейнеры и блоки данных
4.4. Репликация и отказоустойчивость -
Работа с Ozone
5.1. CLI-команды
5.2. Создание и управление volumes и buckets
5.3. Загрузка и чтение данных
5.4. Использование Ozone в качестве S3-совместимого хранилища
5.5. Подключение через Hadoop и Spark
5.6. Подключение Hive к данным в Ozone -
Мониторинг и диагностика
6.1. Логирование
6.2. Метрики и мониторинг (Prometheus и Grafana)
6.3. Отладка и устранение неполадок -
Безопасность и контроль доступа
7.1. Аутентификация и авторизация (Kerberos)
7.2. Управление политиками доступа (Ranger)
7.3. Шифрование данных
7.4. Аудит действий пользователей -
Производительность и оптимизация
8.1. Тюнинг параметров конфигурации
8.2. Балансировка нагрузки и репликация
8.3. Управление ресурсами и планирование
8.4. Рекомендации по улучшению производительности -
Масштабирование и отказоустойчивость
9.1. Расширение кластера
9.2. Восстановление после сбоев
9.3. Репликация и географическое распределение данных
9.4. Планы аварийного восстановления -
Примеры использования и сценарии
10.1. Обработка больших данных
10.2. Использование в качестве резервного хранилища
10.3. Хранилище для машинного обучения
10.4. Сценарии интеграции с другими системами -
Часто задаваемые вопросы (FAQ)
11.1. Основные вопросы по установке и настройке
11.2. Ссылки на официальную документацию
11.3. Сообщество и форумы Apache Ozone
11.4. Вопросы по управлению данными -
Приложения
12.1. Список конфигурационных параметров
12.2. Структура каталогов и файлов
12.3. Примеры конфигурационных файлов
12.4. Глоссарий терминов