Описание [Яндекс.Практикум] Apache Kafka для разработки и архитектуры (2025):
Работа с этой технологией откроет перед вами новые горизонты и позволит продвинуться по карьерной лестнице.
Освоение Apache Kafka станет мощным катализатором для профессионального роста:
- Для бэкенд-разработчиков: вы научитесь создавать масштабируемые, отказоустойчивые и гибкие системы для обработки данных в реальном времени.
- Для архитекторов ПО: вы освоите создание распределённых систем с высокой степенью интеграции и обеспечением консистентности данных.
- Для DevOps-инженеров: вы познакомитесь с инструментами для автоматизации развёртывания, настройки и мониторинга кластеров, что упростит управление инфраструктурой.
- Для инженеров данных: вы научитесь строить конвейеры данных для их передачи из различных источников в системы хранения и обработки.
Этот курс будет полезен вам, если вы:
- Пишете код на Java, Python или Golang.
- Работаете в Linux.
- Понимаете принципы работы SQL и NoSQL баз данных.
- Разбираетесь в архитектуре распределённых систем.
- Умеете запускать и управлять приложениями в Docker-контейнерах.
Программа курса 2025 года:
1. Основы работы с Apache Kafka:
- Основные концепции и терминология.
- Архитектура Kafka.
- Установка и настройка Kafka-кластера.
- Принципы работы продюсеров и консьюмеров.
- Управление группами консьюмеров (Consumer Groups).
- Сериализация данных.
2. Потоковая обработка данных с использованием Apache Kafka:
- Основы потоковой обработки данных.
- Работа с KSQL и ksqlDB.
- Обработка данных в потоковом режиме.
3. Администрирование Apache Kafka:
- Администрирование Kafka-кластеров.
- Балансировка нагрузки.
- Мониторинг работы системы.
4. Интеграция с внешними системами через Kafka Connect:
- Интеграция данных с использованием Kafka Connect.
- Работа с Debezium PostgresConnector.
5. Безопасность в Apache Kafka:
- Обеспечение безопасности Kafka-кластеров.
- Работа с внешними службами авторизации.
- Настройка ACL.
6. Использование Kafka в производственной среде и интеграция с экосистемой Big Data:
- Развёртывание Kafka в производственной среде.
- Работа с Kafka в облаке.
- Интеграция с Apache NiFi, Apache Spark и Apache Hadoop.
7. Финальный проект:
- Конфигурирование сервиса с использованием технологий, изученных на курсе.
Подробнее:
Скачать курс [Яндекс.Практикум] Apache Kafka для разработки и архитектуры (2025):
Для просмотра содержимого вам необходимо авторизоваться
Последнее редактирование модератором:
