Мы используем cookie для стабильной работы сервиса. Подробнее

Spark на Scala: Потоковая обработка

ФорматОнлайн
Объём5 занятий
О курсе

Подробнее

Этот курс является продолжением курса по Spark. В этот раз мы займемся изучением потоковой обработки данных в Spark.   Пройдя этот курс, вы поймете, чем пакетная обработка отличается от потоковой освоите работу со Spark Streaming и Structured Streaming научитесь организовывать потоковую обработку данных   Ожидается, что вы  знаете Scala (если вы прошли курс Основы Scala, то должны справиться и с этим курсом по Spark) знакомы Spark и имеете представление о работе с датафреймами и датасетами (если вы проходили курс Spark на Scala, то полученных знаний будет достаточно для прохождения данного курса)
Содержание

Программа курса

5 занятий
№ТемаЧто внутри
01Введение

- Приветствие
- Подготовка к работе
- Потоковая обработка данных

02Structured Streaming

- Основные принципы
- Тестовые задачи
- Практика

03Работа с состоянием

- GroupsWithState
- Тестовые задачи
- Практика

04Дополнительные возможности

- Вероятностные алгоритмы
- Практика

05Практика

- Задание

01Введение

- Приветствие
- Подготовка к работе
- Потоковая обработка данных

02Structured Streaming

- Основные принципы
- Тестовые задачи
- Практика

03Работа с состоянием

- GroupsWithState
- Тестовые задачи
- Практика

04Дополнительные возможности

- Вероятностные алгоритмы
- Практика

05Практика

- Задание

Организатор

Автор курса

StepikStepik
Stepik — образовательная платформа и конструктор онлайн-курсов. Мы разрабатываем алгоритмы адаптивного обучения, сотрудничаем с авторами MOOC, помогаем в проведении олимпиад и программ переподготовки. Наша цель — сделать образование открытым и удобным. Stepik — широко известная российская образовательная платформа, основанная в 2013 году. На Stepik зарегистрировано более миллиона пользователей из России и стран СНГ. В настоящее время на Stepik представлены несколько тысяч учебных курсов на самые разные темы.
Подробнее об авторе
Мнения учеников

Отзывы о курсе

Оставьте отзыв

Расскажите о качестве обучения, поддержке и результате. Это поможет другим выбрать организацию осознанно.

Напишите ваш коментарий, не менее 30 символов

Нажимая кнопку, вы даете согласие на обработку персональных данных

Оставьте заявку

Консультант ответит на вопросы о курсе «Spark на Scala: Потоковая обработка» и поможет разобраться в деталях обучения.

Комментарий ...

Нажимая кнопку, вы даете согласие на обработку персональных данных

Направления:ScalaData Engineering

Информация обновлена 3 сентября 2026 г.

Продолжить выбор

Похожие курсы

Современные подходы к управлению данными
−10%17 декабря
Современные подходы к управлению данными

Обзор современных методов управления данными от реляционных СУБД до NoSQL. Узнайте, как выбрать правильную систему для ваших задач и оптимизировать ее использование. Курс охватыва…

Онлайн10 занятийНачальный
33 900 ₽−10%
30 510 ₽
Инженер данных - курс переподготовки
−17%400 часов
Инженер данных - курс переподготовки

Инженер данных разрабатывает и обслуживает инфраструктуру получения, хранения и первоначальной обработки данных. Data engineer - специальность технического характера, необходимая…

Онлайн13 занятий
Текстовые уроки
39 910 ₽−17%
32 980 ₽Скидка до 26 октября
Инженер данных
6,5 месяца
Инженер данных

Data Engineering: Python для обработки данных, SQL для работы с базами. Apache Airflow для оркестрации ETL процессов, облачные технологии для больших данных. Моделирование хранили…

ОнлайнНачальный
100 000 ₽от 5 555 ₽/мес на 18 мес.
Arenadata Catalog: специалист
3 ак.часа
Arenadata Catalog: специалист

Курс поможет получить актуальные знания по основам управления данными, а также навыки работы в роли специалиста по данным, которые планируют использовать мощные инструменты Arenad…

Онлайн5 занятий
20 130 ₽
Начать без затрат

Бесплатные курсы

Основы Apache Hadoop
Бесплатно
Основы Apache Hadoop

Курс «Основы Apache Hadoop»: онлайн и очное офлайн обучение в Москве в Бауманском учебном центре «Специалист». Стоимость обучения. Программа курса. Отзывы. Расписание групп обучен…

Онлайн
Бесплатно
Scala 3: Классы и объектно - ориентированное программирование
Бесплатно
Scala 3: Классы и объектно - ориентированное программирование

Курс «Scala 3: Классы и объектно-ориентированное программирование»: онлайн и очное офлайн обучение в Москве в Бауманском учебном центре «Специалист». Стоимость обучения. Программа…

Онлайн
Бесплатно