Данные
Загрузить учебную таблицу.
Что такое PySpark
PySpark — интерфейс Python для работы с Apache Spark.
Где пригодится
Преобразование
Выполнить обработку средствами Spark.
Результат
Проверить полученные значения.
Курсы с PySpark
Яндекс ПрактикумML-инженер
Курс Яндекс Практикума готовит ML-инженера: школа указывает 12 месяцев и 18 проектов. Для комфортного обучения нужны основы SQL, Python и математики; доступен необязательный подготовительный модуль.
153 600 ₽
Стоимость курса
от 6 271 ₽ / мес. на 36 мес.
Яндекс ПрактикумАналитик данных
Курс Яндекс Практикума знакомит с аналитикой данных, SQL, Python и DataLens. В карточке указано восемь проектов, а в разделах программы перечислено больше проектных работ; их состав уточняйте у школы.
97 200 ₽
Стоимость курса
от 3 968 ₽ / мес. на 36 мес.
Яндекс ПрактикумСпециалист по Data Science
Курс Яндекс Практикума знакомит с Data Science с нуля: в программе SQL, Python, статистика и машинное обучение.
134 800 ₽
Стоимость курса
от 5 504 ₽ / мес. на 36 мес.
KARPOV.COURSESИнженер данных с нуля
Курс знакомит с инженерией данных с нуля: SQL, Python, базы данных, PySpark и Airflow. В программе есть практические задания и проект по обработке данных.
103 950 ₽
Стоимость курса
Что важно знать об инструменте «PySpark»
PySpark позволяет использовать возможности Apache Spark из Python. С его помощью можно описывать обработку данных с применением интерфейсов Spark.
Инструмент используют для анализа и обработки данных в проектах на Spark. Освоение преобразований помогает разбирать последовательность обработки наборов данных.
Режим выполнения и производительность зависят от окружения и размера данных. Проверяйте схему, типы полей и результаты преобразований.
Что посмотреть дальше
Инструменты
Программы, сервисы, языки и технологии помогают решать разные задачи. Выберите инструмент и узнайте, где его изучить.
Открыть