Воздушный поток. Мониторинг потоков данных

Автор: Пётр Чудзик

Издательство: Гелион

Год издания: 2025

ISBN: 9788328919068

Формат: 158x235

Переплет: мягкий переплет

Страниц: 168

Книга новая

Цена обложки книги: 59,00 злотых > Акционную цену вы можете найти на нашем аукционе!

Все данные под полным контролем

В то время, когда многие наши действия перешли в цифровое пространство, мы создаем и агрегируем огромные объемы данных. Мы храним их на дисках устройств, мобильных носителях, в облаках и даже в виде вложений в электронные письма. Чтобы получить от них как можно больше информации, мы должны выполнить соответствующие аналитические и агрегирующие процессы, которые затем позволят нам сделать правильные выводы и затем принять соответствующие решения. Вот тут-то часто и возникает проблема: как согласовать разные форматы данных, правильно их объединить, выполнить маппинг и конвертацию?

Тогда в дело вступают так называемые оркестраторы задач, в том числе Apache Airflow. Это один из самых популярных инструментов для создания, организации и мониторинга рабочих процессов, а также запуска цепочек задач на основе данных из различных источников и в различных форматах.

Apache Airflow – бесплатному сервису, доступному каждому, кто знает язык Python – посвящена эта книга:

• В ней вы найдете описание отдельных модулей инструмента Apache Airflow.
• С помощью содержащихся в нем инструкций вы осуществите процесс установки и подготовите работу среду
• Вы рассмотрите отдельные элементы Apache Airflow
• Вы изучите передовой опыт работы в оркестраторе данных

Пётр Чудзик — выпускник Лодзинского политехнического университета, его профессиональная специализация — технологии больших данных и администрирование современных ИТ-сред (с использованием, среди прочего, облачных вычислений, контейнеризации или IaC — инфраструктуры как кода). Он работает преподавателем в Лодзинском университете, где преподает студентам Linux, базы данных и программирование на Python. Он также является тренером в Академии разработки программного обеспечения. Ежедневно работая техническим менеджером в крупном зарубежном банке, он отвечает за корректную и бесперебойную работу приложений на базе Google Cloud Platform. Всегда открыт новому опыту и знаниям, которыми сможет поделиться с другими в будущем. Его интересуют компьютерные игры, мир новых технологий и фэнтези. Он поклонник серии «Ведьмак» и вселенной Warhammer.

Для успеха необходима предварительная подготовка, без нее мы обязательно потерпим неудачу.

Конфуций