Data Engineer 2022 | Дорожная карта | Александр Савченко | karpov.courses

Подписаться 46 тыс.

Просмотров 22 тыс.

50% 1

Курс Data Engineer: bit.ly/3NTtmwj
В начале своего пути всегда сложно сразу сориентироваться в технологиях, которые применяются в разработке.
Мы подготовили дорожную карту для специалистов сферы Data Engineering.
Уверены, это поможет расширить и структурировать ваши знания.
Материалы используемые в видео: github.com/AlexKbit/de-roadmap
Учитесь Data Science с нами: karpov.courses/

Опубликовано:

3 июн 2022

Ссылка:

Скачать:

Готовим ссылку...

Добавить в:

Мой плейлист

Посмотреть позже

Комментарии : 41

@Frezer911 Год назад

Топовое видео в рунете, структурно раскладывающее требования к дата инженеру. В моем случае упорядочило мои знания.

@user-pl7jy5ee2d 2 года назад

Отличное видео! Спасибо большое! Огромная работа проделана. Поделитесь, пожалуйста, pdf дорожной карты

@alexkbit 2 года назад

Добавили все в описание к видео

@user-pl7jy5ee2d 2 года назад

@@alexkbit Спасибо!

@user-md3wb4th9v Год назад

Yandex DB можно отнести к MPP ?

@habovskiy647 Год назад

Это не Data Engineer это Data Terminator какой-то....

@AlexCoder007 9 месяцев назад

😂

@aidartimerbayev9600 9 месяцев назад

Абсолютно согласен!!!🥶

@daanhelfer1461 18 дней назад

data dungeon master 🍌

@phoenixgames4244 Год назад

Это список вопросов для дата инженера на позицию трейни?! O_o

@dobryialex Год назад

Спасибо за ваш труд ! И пара вопросов : 1. В какой последовательности или по какой системе изучать все эти разделы ? 2. На ваших курсах изучается весь этот объем ? Ещё раз спасибо !

@user-by8um8bk1w 2 года назад

Спасибо за видео, схемой поделитесь?

@dmitriidoronin2114 2 года назад

@SergeyTarabara 2 года назад

@vadimvadim1662 2 года назад

ещё интересно в чем рисовали?)

@alexkbit 2 года назад

Добавили все в описание к видео

@vadimvadim1662 2 года назад

что в 2022 должен знать ds(roadmap)?

@alexkbit 2 года назад

Да я думаю ребята с направления DA/ML тоже позже сделают

@vadimvadim1662 2 года назад

@@alexkbit будем ждать)

@coopercoin 2 года назад

В одного человека реально это всё запихать? Работаю в Ops просто так тут отдел на em, на unix, на dba etc. Возможно схеме не хватает глубины в качестве одной из метрик, или я просто настолько отстал от жизни

@Eugene11453 2 года назад

Аналогичная мысль. Такое ощущение, что это техстек для команды человек на 10 минимум

@user-by8um8bk1w 2 года назад

@Alexander Savchenko что думаете?

@alexkbit 2 года назад

У каждого специалиста будет свой взгляд что именно нужно знать о том или ином инструменте. DevOps Eng. скорее будет интересовать как разворачивается инструмент, как делаются бэкапы, восстановление, как масштабируется. У DE Eng. свой взгляд - плюсы/минусы хранения и использования. Это дорожная карта, вам не обязательно знать все, вы можете обращаться только к тем инструментам которые нужны.

@daanhelfer1461 18 дней назад

Гринплюм, гринплан… гринплам!

@Eugene11453 2 года назад

Это должен 1 человек все знать и уметь? Тут технологий на целую команду: от девопсеров и разрабов до дата-архитекторов

@MaruiInfantry 2 года назад

Это больше похоже на схему деливери отдела, а не на базу знаний. Там более 100 листов выходит у этого дерева в итоге. Чувак час перечисляет просто все эти листы и разветвления до них. Перечисляет, Карл, только час. Это скоуп человек на 50-200.

@alexkbit 2 года назад

Это дорожная карта, она скорее поможет вам понять какие технологии вам нужны сейчас для ваших задач, и что еще можно развить. Обычно чем больше опыта у человека тем больше будет по ней покрытия.

@Eugene11453 2 года назад

@@alexkbit ну как сказать. Например, я для своей команды брал бы в 1ую очередь, человека хорошо знающего spark, hdfs и sql. А для девопса у нас отдельное подразделение есть, на входе можно ничего не знать, они покажут. Я смотрел видео, чтобы понять, насколько мой опыт в этом релеванитен по рынку, и может, что-то закрыть из гепов. Пока выглядит, что у меня геп = 90% от этой карты и не понятно: 1 за что хвататься, 2 реально ли это все нужно , например, тимлиду/продукт оунеру

@Gliderous Год назад

@@Eugene11453 Так ответ выше не противоречит вашей логике. Автор ролика даёт покрытие всей профессиональной области, а вы акцентируете внимание на конкретном стеке из этого покрытия. Тут речь про Общее и Частное. Вы же понимаете, что если у вас в хранилище только реляционные БД, то нет необходимости учить нереляционные.

@habovskiy647 Год назад

@@MaruiInfantry я смотрел на скорости 1.5. Получилось чуть больше получаса. :D