Выгрузка данных из внешних систем // Демо-занятие курса «Data Engineer»
Вы узнаете:
- О существующей классификации источников (царство животных-БД, растений-API…)
- Поймете, как способ выгрузки информации зависит от типа источника (прямолинейно)
- Разберетесь, какие из универсальных инструментов выгрузки данных актуальны сегодня (Airflow, Airbyte, Airan...)
- И научитесь самостоятельно настраивать Data Ingestion пайплайны с помощью NiFi (не списывайте его раньше времени со счетов)
Кому подходит этот урок:
- Начинающим и продолжающим специалистам в области Аналитики данных, Data Engineering
- Безжалостным гикам, шарящим за движуху в мире Big Data
- Тем, кто готов принять и простить тот факт, что Airflow не всегда и не для всего лучший инструмент
Результат урока:
- Изучите существующие источники данных, сможете более грамотно разобраться в их отличительных чертах и применимости к различным задачам
- Узнаете об одних из наиболее популярных инструментов для выгрузок данных в современном мире
- Поймете, чем так хорош Apache NiFi и задумаетесь об его внедрении в вашей команде
«Data Engineer» -
Преподаватель: Алексей Железной - Data Engineer, Wildberries
Подключайтесь к обсуждению в чате -
Пройдите опрос по итогам мероприятия -
Следите за новостями проекта:
- Telegram:
- ВКонтакте:
- LinkedIn:
- Хабр:
56 views
40
3
4 months ago 00:21:04 1
С детства — под цифровой контроль? Инструкция как забрать ребенка с витрины в описании ⬇️