Меню

Избранное

Развёртка инфраструктуры для обработки данных

Подготовьте вычислительные ресурсы и хранение под обработку данных.

В чём состоит навык

Развёртка инфраструктуры обработки данных — настройка компонентов хранения, вычислений и доступа для выполнения задач над данными.

Источник ↗

В каких профессиях пригодится навык

Эти профессии связаны с навыком в каталоге KURSEZ. Конкретные задачи зависят от специализации и места работы.

Связанные профессии

Где пригодится

01

Ресурсы

Выбрать среду вычислений и хранения.

02

Развёртывание

Настроить компоненты и их взаимодействие.

03

Проверка

Проверить доступ, выполнение и наблюдаемость.

Подготовка, навыки и инструменты

Определите объём данных, ожидаемую нагрузку, окружение и требования к доступу.

Связанные инструменты

Курсы для развития навыка «Развёртка инфраструктуры для обработки данных»

На KURSEZ пока не добавлены страницы курсов для развития этого навыка. Когда они появятся, здесь можно будет изучить и сравнить программы.

Содержание

Что важно знать о навыке «Развёртка инфраструктуры для обработки данных»

Инфраструктура обработки данных объединяет места хранения, вычислительные ресурсы и средства запуска задач. Состав зависит от объёма данных и требований к времени выполнения.

В распределённой системе важно проверить распределение ресурсов, доступ к данным и поведение при сбоях. Перед изменениями в рабочей среде настройки исследуют в изолированном окружении.

Для практики опишите учебный кластер с координатором и исполнителями. Укажите, откуда поступают данные, как выделяются ресурсы и что нужно проверить после запуска.

Что посмотреть дальше

KURSEZ

Навыки, которые можно проверить

Откройте каталог навыков и найдите материалы по интересующей вас задаче.

Открыть
KURSEZ

Data Engineer

Узнайте о связанных с профессией задачах и обучении.

Открыть
KURSEZ

Apache Spark

Узнайте об инструменте и связанных с ним материалах KURSEZ.

Открыть

Настройки аналитики

Аналитика не подключена

Сейчас KURSEZ не отправляет данные в Яндекс Метрику. После её подключения здесь можно будет разрешить аналитику или отказаться от неё. Вебвизор использоваться не будет.

Каталог, избранное и переходы на сайты школ доступны без аналитики.