DATALEARN | DE - 101 | МОДУЛЬ 4-8 Требования к ETL разработчику и отличия от Data Engineer
Vložit
- čas přidán 7. 09. 2024
- Практически в описание к любой data вакансии мы можем встретить термин ETL. ETL роль очень важная, так как эти процессы отвечают за консолидацию данных в едином хранилище данных, а в некоторых случаях это может быть озеро данных. Концептуально вакансия ETL разработчик/инженер Data Engineer очень похоже, разница лишь в скилах и названии позиции. В этом видео мы:
📌 Рассмотрим историю data профессий по интеграции данных
📌 Узнаем топ 11 навыков инженера данных
📌 Поговорим о сходствах и различиях двух вакансий
📌 Рассмотрим главные скилы ETL разработчика (ETL) и Инженера данных (DE)
📌 Вакансии ETL и DE Amazon, Facebook, Google
📌 Вакансии ETL и DE Российских компаний
📌 Вакансии ETL и DE в мире
В 4-ом модуле нашего курса вы узнаете про интеграцию и трансформацию данных - ETL и ELT. Это ключевой элемент в аналитическом решении, с помощью которого мы наполняем данными хранилище данных и автоматизируем загрузку и трансформацию данных. Мы рассмотрим примеры популярных on-premise batch решений. Узнаете в чем отличие ETL от ELT, для чего нужны такие решения, что значит batch и on-premise, как с помощью ETL/ELT можно создавать модели данных, на примере dimensional modelling, рассмотрим рынок ETL/ELT. Потренируемся на классическом open-source ETL решении Pentaho DI и рассмотрим настольный инструмент от Tableau - Tableau Prep.
⚠️Для эффективного прохождения курса необходимо зарегистрироваться в Slack (наш чат) и читать учебник на Github, в котором рассказывается про последовательность урок, лабораторные работы и домашнее задание.⚠️
В этом модуле, мы не будем затрагивать облачные ETL/ELT инструменты и решения Big Data, для этого у нас будут отдельные модули.
🔔 Подписывайтесь на канал "Datalearn" чтобы не пропустить остальные части и ставьте лайки!
📕 Записывайтесь и проходите курс Инженера Данных.
⚠️ КУРС БЕСПЛАТНЫЙ!
🔗 Записаться вы можете на нашем портале
datalearn.ru/
👍🏻 Запись на курс даст вам возможность не только просматривать видео, но и получить доступ к закрытым материалам, а также возможность выполнять домашние задания, отдавать их на проверку и получить сертификат прохождения курса.
💸Поддержать проект (а вдруг?): / dmitryanoshin или paypal.me/dmit...
📚Книги по аналитике Дмитрия Аношина - www.amazon.com...
13:14 "Эта музыка будет вечной, если я заменю батарейки".
Такая же "петрушка" с определениями junior, middle & senior - практически в каждой компании своё видение. Мидл в одной может стать джуниором в другой или синьором в третьей.
Можно просто не обращать на это внимание в своем резюме. В вакансиях это обычно показывает только зону ответственности и зп. Как раз про перспективы и оплату в которых идет речь в ролике)
Умение писать SQL на бумажке - какой-то сомнительной ценности навык. 10+ лет пишу запросы, но до сих пор запросто могу ... ну даже FROM пропустить, особенно когда быстро пишешь или конец рабочего дня в конце рабочей недели.
Спасибо видео. Только незачем в каждом видео называть себя "это" (лучше говорить "я Дмитрий..." или "c вами Дмитрий")
czcams.com/video/YF15Nh7DdOs/video.html 200к до налогов это 175к - на руки.