ROADMAP / DATA ENGINEER

В видео мы поговорим о разработчиках больших данных. А точнее - разберем roadmap дата инженера в 2021 году.
Гогин Артем, опытный разработчик больших данных, расскажет, какие навыки необходимы для старта карьеры в больших данных, и на чем необходимо сосредоточиться для продвижения по карьерной летнице.
Описаный roadmap поможет новичкам сосредоточиться на актуальных и востребованных технологиях, а опытным разарботчикам систематизировать свои знания и, возможно, обратить внимание на новые области.

ПОЛЕЗНЫЕ ССЫЛКИ

ГДЕ С НАМИ ПООБЩАТЬСЯ

Поставь лайк! Больше лайков - лучше выпуски :)

[ScampSkin]

Отличный темп подачи материала. Хоть в эту сферу и не собираюсь идти, но всё равно было приятно случать человека, который не мычит\причмокивает\зависает, а выдаёт готовый материал беглой манерой речи.

[hopelesssuprem]

учусь на ML и сейчас стал встречать часто в вакансиях тоже знание спарка, понимание ETL и т.д., в общем, планка с каждым годом только растет и растет)

[iMan-qlgx]

Хорошее объяснение. Было бы познавательно увидеть какое практическое видео из реальной работы . Например, создание пайплайна.

[cfbsujn]

Обзор огонь! Спасибо огромное, очень наглядно и понятно.

[seniorqa_auto]

Самый понятный роадмап! Спасибо. Рассчитывал найти курс для DATA ENGINEER, а курса на платформе нет Где курс? )

[GhostlyDream]

Полезное видео, но забавно, что в большинстве вакансий на джуна требуются знания, которые в данном видео позиционируются как сеньоровские)
не нашел ни одной вакансии Junior Data Engineer без знания Hadoop, Spark, Kafka и NoSQL вместе)

[DurezaSPb]

Интересное видео, спасибо!
Однако, по своему опыту, оставило в недоумении. Я вот только устроился на джуна. Было много собеседований. Так вот, некоторые из вопросов на эту позицию были ровно из тех, что вы показали для джуна, но примерно треть-половина - это из тех, что вы причислили к миддлу и даже сеньору (оконные функции, кафка, спарк-стриминг и спарк вообще, имплиситы в скале и паттерн-мэтчинг и много чего ещё). Это мне не повезло? Или сейчас планка, чтобы просто пойти и сделать первую джуниорскую таску, стала выше?

[alexgubin]

Очень информативное видео. Подскажите пожалуйста, на каком уровне нужно знать джаву/питон? У меня есть опыт написание программ на джаве, но не совсем мне понятно, что нужно подучить, чтобы выполнять работу ДЕ

[timikys]

Спасибо за полезное видно! Артем, какой язык порекомендуете учить для DE Java или Python? Есть цель переезда в США, когда смотрел варианты увидел, что большинство вакансий там на Python. В отличии от России/Европы где достаточно много Java/Scala. Какие из Российских компаний лучше подходят чтобы прокачаться в направлении DE?

[ermano]

А давай теперь курсы и материалы для изучения

[kirillnovikov]

Я вот учусь на Java developer. Java, SQL, Git и алгоритмы уже знаю на достаточном (по этому родмэпу) уровне для устройства Джун Data Engineer, но в разработке я ещё не близко к первой вакансии. Я все вообще правильно понял? Может ещё что-то нужно знать Data Engineer?

[dmitriyobidin]

Из вашего личного опыта - насколько ЗП дата инженеров отличаются от зарплат разработчиков? Не будешь ли чувствовать, что сделал не правильный выбор, перейдя в Биг Дату?
Сейчас работаю энтерпрайз разработчиком и хочется перейти в биг дату, но немного пугает тот факт, что потолок зарплат может быть заметно ниже.

[playtech]

Здравствуйте!
Спасибо за видео!
Как получить этот роадмап?

[wordpreslabs]

Подскажите пожалуйста, в каком софте схемы для презентации сделаны?)

[simon]

Хороший обзор! Подскажите, как найти первую DE работу? По знаниям jun+

[michailo]

Мне кажется уровень senior и middle должны быть немного по пониже. Слишком уж они высокие требования здесь

[npwmkrl]

Сильно скучная профессия или интересно?