Данные
Подготовить источник для обработки.
Что такое Apache Spark
Apache Spark — движок для распределённой обработки данных.
Где пригодится
Вычисления
Описать необходимые преобразования.
Проверка
Сверить результат и условия выполнения.
Подготовка и связанные навыки
Определите задачу обработки и подготовьте учебные данные.
Курсы с Apache Spark
Яндекс ПрактикумИнженер данных
Курс по инженерии данных для специалистов с навыками SQL и Python: проектирование хранилищ, пайплайнов, Data Lake и потоковой обработки.
95 600 ₽
Стоимость курса
от 3 903 ₽ / мес. на 36 мес.
Яндекс ПрактикумИнженер данных с нуля
Курс Яндекс Практикума готовит инженеров данных с нуля: участники изучают Python и SQL, строят хранилища и автоматизируют обработку данных.
135 600 ₽
Стоимость курса
от 5 536 ₽ / мес. на 36 мес.
Яндекс ПрактикумML-инженер
Курс Яндекс Практикума готовит ML-инженера: школа указывает 12 месяцев и 18 проектов. Для комфортного обучения нужны основы SQL, Python и математики; доступен необязательный подготовительный модуль.
153 600 ₽
Стоимость курса
от 6 271 ₽ / мес. на 36 мес.
Merion AcademyАналитик данных с нуля
Курс аналитика данных: Excel и SQL, обработка данных на Python, визуализация и основы машинного обучения.
24 890 ₽
Стоимость курса
Что важно знать об инструменте «Apache Spark»
Apache Spark предоставляет средства для распределённой обработки данных. Задачи выполняются с учётом доступного окружения и конфигурации.
Движок применяют при обработке и анализе наборов данных. Понимание преобразований и выполнения задач помогает подготовить обработку и проверить её результат.
Производительность зависит от данных, ресурсов и устройства вычислений. Перед переносом решения на большой объём полезно проверить корректность на небольшом учебном наборе.
Что посмотреть дальше
Инструменты
Программы, сервисы, языки и технологии помогают решать разные задачи. Выберите инструмент и узнайте, где его изучить.
ОткрытьАнализ больших данных
Узнайте об этом навыке и связанных с ним материалах KURSEZ.
ОткрытьОбработка больших объёмов данных
Узнайте об этом навыке и связанных с ним материалах KURSEZ.
Открыть