PySpark. Kurs video. Przetwarzanie i analiza
- Время доставки: 7-10 дней
- Состояние товара: новый
- Доступное количество: 999
Просматривая «PySpark. Kurs video. Przetwarzanie i analiza», вы можете быть уверены, что данный товар из каталога «E-курсы» будет доставлен из Польши и проверен на целостность. В цене товара, указанной на сайте, учтена доставка из Польши. Внимание!!! Товары для Евросоюза, согласно законодательству стран Евросоюза, могут отличаться упаковкой или наполнением.
ПиСпарк. Видеокурс. Обработка и анализ данных в ETL-процессах
Автор: Пётр Чудзик
Издатель: Videopoint
Год выпуски: 2023
ISBN: 978-83-289-0401-9
Формат: Не определен
Продолжительность: 03:50:54
Первоначальная цена видеокурса: 149,00 злотых > Акционную цену вы найдете на нашем аукционе!
ЦИФРОВАЯ ВЕРСИЯ: ВИДЕО
Формат: Онлайн (потоковая передача)
Пройдите курс... по работе с большими наборами данных
Знакомы ли вы с Apache Spark и PySpark? Если вы работаете с данными и еще не освоили эту технологию, самое время наверстать упущенное — например, на нашем видеотренинге. Apache Spark — открытая платформа разработки для распределенных вычислений. Первоначально разработанный и разработанный в Калифорнийском университете, сегодня управляемый Apache Software Foundation, он идеально подходит для анализа больших наборов данных. Его API, известный как PySpark, эффективно облегчает интеграцию Spark со специализированными инструментами PyData.
В последние годы PySpark стал самым популярным инструментом обработки данных; в этом отношении он может легко заменить SQL или библиотеки pandas/numpy. Spark используется, среди прочего, Databricks, DeepNote и JupyterLab. Особенностью и преимуществом этого решения является то, что оно обеспечивает распределенную обработку данных. Наш курс позволяет получить базовые знания по работе с данными с помощью Apache Spark (PySpark). В ходе него мы подготовим данные, выберем их, отсортируем, агрегируем, объединим и сгруппируем, а также создадим собственные функции для их сопоставления и научимся сохранять в файл.
Что вас ждет во время нашего профессионального обучения
Предлагаемый нами курс включает в себя:
- Вы настроите рабочую среду.
- Вы узнаете, что такое SparkSession и как его запускать.
- Вы создадите базовый DataFrame.
- Вы выберете и отсортируете данные
- Вы построите схему данных
- Вы изучите основные операции, связанные с агрегацией данных и объединением наборов в одно
- Вы будете преобразовывать данные с помощью методов такие как конкатенация, проекция или разнесение.
- li>
- Вы создадите свои собственные функции для PySpark.
- Вы будете выполнять сопоставление.
- Вы сохраните данные и прочитать его из файла - тоже в формате паркета
PySpark. Видеокурс. Обработка и анализ данных в процессах ETL завершаются на базовом уровне. Полученные знания позволят вам самостоятельно создавать первые процессы, связанные с преобразованием и обработкой данных. Это также облегчит вам их сопоставление и изменение типов данных. После прохождения обучения вы легко сможете готовить задачи ETL.
Apache Spark
Apache Spark — это механизм, созданный специально для обработки данных. Для этого он оснащен целым рядом библиотек. Важно отметить, что данные в Spark могут обрабатываться параллельно, что стало одной из причин, почему эта технология доминирует в мире больших данных. Apache Spark поддерживает несколько языков программирования, таких как SQL, Scala, Python и R, и позволяет решать проблемы различными способами с использованием SQL, передачи данных и машинного обучения. Это полезно везде, где объем данных, которые необходимо обработать, превышает возможности традиционных инструментов.
Что такое видеокурс?
Видеокурсы — это самый простой, быстрый и в то же время очень эффективный способ обучения. В Интернете можно научиться практически всему: от основ программирования, обработки фотографий и видео до... йоги. Обучение, доступное в Videopoint, состоит из нескольких минутных уроков, подготовленных экспертами из разных отраслей. Благодаря сочетанию изображения и комментария автора, поясняющего происходящие на экране действия, даже очень сложные вопросы оказываются простыми и понятными.
Как играть на курсах?
Если вы хотите смотреть курсы на своем компьютере, все, что вам нужно, это последняя версия вашего веб-браузера. Курсы транслируются (играются онлайн) с использованием технологии HTML5. Воспроизвести видео также можно в удобном и бесплатном мобильном приложении Videopoint. Вы можете скачать приложение для устройств с системами Android, iOS, HarmonyOS.
Как я получу курс?
- Вы получите сообщение на свой электронный ящик содержащий специальный код. Электронное письмо будет отправлено вам в течение часа с момента подтверждения платежа.
- Если у вас уже есть код, просто перейдите на сайт Videopoint и следуйте инструкциям с инструкциями. После нажатия «Подтвердить» курс станет доступен в Вашей библиотеке Videopoint.
- Вы можете пройти курс онлайн (в потоковом режиме) на веб-сайте Videopoint. или мобильное приложение.
- Ваш код действителен в течение одного года с даты покупки.