Курс дистанционного обучения "KAFKA: Администрирование кластера Kafka"

3х дневный практический курс предназначен в большей степени для администраторов и инженеров данных в обязанности которых входит выполнение задач настройки и обслуживания инфраструктуры потоковой обработки данных Data Flow. Для дата аналитиков, разработчиков и дата инженеров для которых необходимо программировать приложения распределенной обработки потоковых данных присмотритесь ко второму нашему курсу по Apache Kafka с уклоном в разработку DEVKI: Apache Kafka для инженеров данных.

Чему вы научитесь после курса Apache Kafka:
Разворачивать и настраивать высокодоступные кластеры Apache Kafka с нуля, как с использованием Zookeeper, так и в современном KRaft-режиме.
Администрировать кластер на профессиональном уровне: управлять брокерами, топиками, партициями и потребителями через CLI и UI-инструменты.
Обеспечивать безопасность кластера с помощью SSL/TLS для шифрования, SASL, Kerberos, OAUTH для аутентификации, а также настраивать детальные права доступа через ACL.
Оптимизировать производительность и масштабировать кластер под высокие нагрузки, правильно подбирать конфигурации и выполнять балансировку партиций.
Настраивать мониторинг с помощью популярных инструментов, таких как Prometheus и Grafana, для проактивного отслеживания состояния кластера и предотвращения сбоев.
Проектировать отказоустойчивые решения, настраивать репликацию данных и репликацию между дата-центрами с помощью MirrorMaker 2.
Планировать и проводить миграцию со старых версий Kafka на новые, включая переход на архитектуру без Zookeeper.
Интегрировать Kafka с другими системами экосистемы Big Data, такими как Apache NiFi, Hadoop, ClickHouse, Greenplum для построения комплексных конвейеров данных.
Подробная программа курса и запись в группу: https://bigdataschool.ru/courses/apache-kafka-administrator-course/

Теги: #apache kafka #big data