Потік повітря. Відео курс. Управління та моніторинг потоків даних

Автор: Пьотр Чудзік

Видавництво: Videopoint

Рік видання : 2023

ISBN: 9788328904002

Формат: Не вказано

Тривалість: 04:48:53

Ціна відеокурсу: 169,00 злотих> Акційну ціну ви знайдете на нашому аукціоні!

ЦИФРОВА ВЕРСІЯ: ВІДЕО

Формат: онлайн (потокове передавання)

Пройдіть курс... керування потоками даних

Якщо ви працюєте або працюватимете з даними, рано чи пізно ви зустрінете акронім ETL. ETL, або вилучення, перетворення та завантаження, — це процес, який зазвичай використовують організації, які збирають і поєднують дані з багатьох джерел для підтримки завдань виявлення, звітування, аналізу та прийняття рішень. Apache Airflow дозволяє створювати високоякісні процеси ETL і запроваджувати оптимізацію незалежно від кінцевої інфраструктури (наприклад, реляційна база даних, файли json тощо). Використовуючи Python, Airflow використовується для планування багатьох завдань і робочих процесів у проектах і організаціях. Тому він буде ідеальним для людей, які знайомі з Python, яким потрібно працювати з наборами даних і контролювати їх потік, але не хочуть створювати власний інструмент ETL.

Як рішення з відкритим вихідним кодом, Apache Повітряний потік все частіше потрібен на таких посадах, як інженер з обробки даних або аналіз даних. Це не дивно, оскільки автоматизація є одним із найважливіших процесів у сучасній ІТ, а головна перевага Airflow полягає в тому, що він полегшує автоматизацію процесів. Основним способом визначення завдань тут є спрямовані ациклічні графи (DAG), які визначають зв’язки між операторами, порядком і залежностями. DAG Airflow може містити кілька гілок, і вам вирішувати, які з них поважати, а які ігнорувати під час виконання робочого циклу.

Наш курс охоплює основні теми, пов’язані з оркестровкою завдань через Apache Airflow. Під час нього ви дізнаєтесь, як повністю створити процес за допомогою Airflow: налаштувати глобальні змінні та з’єднання, створити DAG та його планувальник і конфігурацію. Ви також дізнаєтеся про найважливіші елементи Airflow, такі як оператор і датчик.

Що чекає на вас під час нашого професійного навчання

Під час курс, серед іншого:

• Ви побачите, як правильно налаштувати робоче середовище
• Ви дізнаєтесь, що таке DAG і що таке оркестровка завдань
• li>
• Ви створите оператори типу Bash, Empty, Python, SimpleHTTP і PostgreSQL
• Ви встановите планувальник і операцію catch, а також стандартні аргументи DAG
• Ви налаштуєте датчики
• Ви запустите команди SQL на База даних PostgreSQL
• Ви будете налаштовувати змінні веб-сервера за допомогою об’єктів Param, Variable, Config
• Ви будете використовувати шаблони Jinja для передачі параметрів
• Ви будете керувати завданнями за допомогою групування, розгалуження і створення

Тигери повітряного потоку. Відео курс. Ви закінчите керування та моніторинг потоку данихна базовому рівні. Отримані знання дозволять самостійно готувати прості оркестратори завдань на основі SQL та Python. Крім того, ви зможете захищати процеси за допомогою датчиків і вводити глобальні змінні або конфігурації за допомогою об’єктів веб-сервера.

Для досягнення вершини завжди потрібно виконати тисячі маленьких кроків. Щоб розібратися в складних і складних речах, потрібно спочатку отримати базові знання. Матеріал, що міститься у вищезазначеному курсі, є першим кроком для людей, які бачать своє майбутнє в ІТ-індустрії.

Що таке відеокурс?

Відеокурси — це найпростіший, найшвидший і водночас дуже ефективний спосіб навчання. В Інтернеті можна навчитися майже всього: від основ програмування, обробки фото та відео до... йоги. Навчання, доступне у Videopoint, складається з кількахвилинних уроків, підготовлених експертами з різних галузей. Завдяки поєднанню зображення та коментаря автора, який пояснює дії, що виконуються на екрані, навіть дуже складні питання виявляються простими та зрозумілими.

Як грати на курсах?

Якщо ви хочете переглядати курси на своєму комп’ютері, вам потрібна остання версія веб-браузера. Курси транслюються (відтворюються онлайн) за технологією HTML5. Ви також можете відтворити відео в зручному та безкоштовному мобільному додатку Videopoint. Ви можете завантажити додаток для пристроїв з системами Android, iOS, HarmonyOS.

Як я отримаю курс?

• Ви отримаєте повідомлення на свою електронну скриньку містить спеціальний код. Електронний лист буде надіслано вам до години з моменту підтвердження платежу.
• Якщо у вас уже є код, просто перейдіть на Videopoint і дотримуйтесь інструкцій з інструкціями. Після натискання «Підтвердити» курс стане доступним у Вашій бібліотеці Videopoint.
• Ви можете відтворити курс онлайн (потокове передавання) на веб-сайті Videopoint або мобільний додаток.< /li>
• Ваш код дійсний протягом одного року з моменту покупки.