Описание курса
Вы развернёте кластер Kafka в Docker, реализуете продюсеров и консьюмеров с управлением партициями и смещениями, освоите сериализацию через Avro и Protobuf с подключением Schema Registry. Отдельный блок посвящён интеграции Kafka с Pandas — для аналитики потоковых данных без переключения на батч-режим. На Faust напишете стриминговое приложение с хранением состояния в RocksDB. Разберёте exactly-once семантику: идемпотентная запись, транзакции, гарантированная доставка.
По окончании — удостоверение о повышении квалификации. Форматы: очно и онлайн.
Python-разработчики, Data Science инженеры, Data Engineers — все, кто упирается в производительность очередей или хочет перейти с батчей на стримы. Team Lead’ам курс поможет внедрить event-driven подход в команде.
Для бизнеса — возможность стандартизировать работу с потоками данных и сократить задержки в пайплайнах.
Корпоративным группам — индивидуальные условия.
Эти навыки входят в требования более 65% вакансий для Data Engineer и специалистов по потоковой обработке.
Зарплатный диапазон — от 120 000 до 450 000 рублей.
Программа также охватывает материал для подготовки к сертификации Confluent Certified Developer for Apache Kafka.
Вы научитесь
- проектировать событийно-ориентированную архитектуру и обоснованно выбирать Kafka вместо RabbitMQ;
- писать продюсеров и консьюмеров на Python: асинхронная отправка, кастомное партицирование, группы потребителей, обработка ребалансировки;
- сериализовать данные через Avro, Protobuf, JSON с использованием Schema Registry — без потери совместимости;
- интегрировать Kafka с Pandas для аналитики в реальном времени, а не только по файлам;
- разрабатывать стриминговые приложения на Faust (Kafka Streams для Python) с таблицами состояний и RocksDB;
- настраивать exactly-once семантику: идемпотентные продюсеры, транзакции, гарантированная доставка.
Специалисты, обладающие этими знаниями и навыками, в настоящее время крайне востребованы.
Обучение по мировым стандартам позволяет нашим выпускникам работать в ведущих компаниях России и других стран. Они делают успешную карьеру и пользуются уважением работодателей.
Программа курса
Аудиторная нагрузка в классе с преподавателем 24 ак. ч. + 24 ак. ч. бесплатно*
* Для слушателей курса предусмотрено время для самостоятельной практической отработки и проработки материала в компьютерных классах Центра.
Вы можете использовать его для закрепления знаний, выполнения домашних заданий и консультаций со специалистами.
Время предоставляется бесплатно по предварительному согласованию с администратором комплекса:
- для занятий с 10:00 до 17:10: дополнительное время с 9:00 до 10:00.
- для занятий с 14:00 до 17:10: дополнительное время с 13:15 до 14:00.
- для занятий с 18:30 до 21:30: дополнительное время с 17:10 до 17:55.
По завершении обучения проводится итоговая аттестация. Она может проходить в виде теста на последнем занятии или основываться на результатах выполнения практических заданий в ходе курса.
Документы об окончании
В зависимости от программы обучения выдаются следующие документы:
Свидетельство выпускника
Cертификат международного образца
Удостоверение о повышении квалификации
* Для получения удостоверения вам необходимо предоставить копию диплома о высшем или среднем профессиональном образовании.
Сертификаты международного образца выводятся после окончания курса в личном кабинете слушателя.
