TeachMeSkills Школа программирования
TeachMeSkills Школа программирования
  • 500
  • 4 020 672
Кто такой Инженер данных?
🤚Привет! Ты на канале IT школы TeachMeSkills. И я ведущий рубрики НАТИВ Илья Рублевский.
🧐В мире, основанном на данных, необходимо, как бы ни звучало прямо, с ними работать. Где-то это построение моделей, где-то изучение и анализ данных, где-то транспортировка данных и прочее. Буду краток - с моим гостем и нашим наставником Димой мы по полочкам разберем профессию Дата инженер и расскажем про направление в нашей школе, которое Дима и ведет.
❗️Курс Data инженер (BY) - v.gd/10HUyE
❗️Курс Data инженер (RU) - clck.ru/3B52SH
🧔Профайл Димы - www.linkedin.com/in/dmitriy-tsipin-12a7808b/
🧔Telegram Ильи (для ваших предложений по контенту) - @ilyarublevsky
Что еще будет в видео👇
0:00 - Интро
1:37 - Знакомство
6:17 - Кто такой инженер данных
9:34 - В чем отличие инженера данных от аналитика данных и дата сайенс
16:45 - Что делает на работе Data инженер
18:45 - Всем ли сегодня нужны инженеры данных
20:38 - “Инструменты” в работе Data инженера
24:21 - Какой язык программирования лучше для Data инженера
27:49 - Базы данных для работы Data инженера
29:40 - ETL - процессы
32:46 - Про визуализацию данных
34:05 - Про переход в Data инженера из других областей
36:55 - Про личные качества для работы инженером данных
38:56 - В каких компаниях есть классная экспертиза для Data инженеров
41:55 - Как происходит рост в компаниях
46:03 - Про знание английского
47:08 - Про программу курса “Инженер данных”
49:31 - За что ты любишь профессию Инженер данных
Переглядів: 749

Відео

Project Manager - для кого эта профессия?
Переглядів 35214 днів тому
🤚Привет! Ты на канале IT школы TeachMeSkills. 🧐Ребят, очередное видео из нашей рубрики “Ламповый эфир”. Уже давно мы ничего не снимали про менеджмент, декомпозицию задач и управление проектами, поэтому с нашим гостем Денисом закроем сегодня следующие темы: 🔍Что интересного произошло в профессии PM за последние несколько лет, какие есть изменения. 🔍 Кого сегодня ожидает рынок в качестве начинающ...
Python против C# Что лучше для новичка
Переглядів 13 тис.Місяць тому
🤚Привет! Ты на канале IT школы TeachMeSkills. И я ведущий рубрики НАТИВ Илья Рублевский. 🧐Все подвергается сравнению в природе. В мире программирования также есть темы и предметы для сравнения. И всегда приятно провести время за интеллектуальной дискуссией, когда ведется разговор об языках программирования. Python или C#? Что лучше подойдет для новичка? Давайте узнаем вместе. Помогут во всем ра...
Что есть для новичков в GameDev? (Game Stream о карьерных возможностях и менторских программах)
Переглядів 8922 місяці тому
🤚Привет! Вы на канале IT школы TeachMeSkills. 🧐Ребят, очередное видео из нашей рубрики “Ламповый эфир”. Мы редко, но метко делаем интересное освещение тем из мира геймдева, поэтому мы рады крутой возможности пообщаться с гостями из крупнейшего представителя геймдев-индустрии СНГ - Lesta Games. Также мы разберем следующие моменты: 🎮Сколько активных офисов у компании сейчас есть в СНГ и сколько с...
DevOps - что за профессия? (ламповый эфир)
Переглядів 8862 місяці тому
DevOps - что за профессия? (ламповый эфир)
День открытых дверей (Лампово и нескучно об IT)
Переглядів 2,3 тис.2 місяці тому
День открытых дверей (Лампово и нескучно об IT)
Поиск работы для UX/UI дизайнера - к чему готовиться? (ламповый эфир)
Переглядів 4903 місяці тому
Поиск работы для UX/UI дизайнера - к чему готовиться? (ламповый эфир)
Как пройти СОБЕСЕДОВАНИЕ на C# & .Net РАЗРАБОТЧИКА (3)
Переглядів 19 тис.3 місяці тому
Как пройти СОБЕСЕДОВАНИЕ на C# & .Net РАЗРАБОТЧИКА (3)
Что такое PHP?
Переглядів 9 тис.5 місяців тому
Что такое PHP?
Java-разработка. Коротко о главном
Переглядів 1,7 тис.5 місяців тому
Java-разработка. Коротко о главном
UX/UI-дизайн. Коротко о главном
Переглядів 9375 місяців тому
UX/UI-дизайн. Коротко о главном
Новогоднее поздравление от IT-школы TeachMeSkills 2024
Переглядів 7255 місяців тому
Новогоднее поздравление от IT-школы TeachMeSkills 2024
Тренды в It 2024 - догадки и фантазии
Переглядів 14 тис.6 місяців тому
Тренды в It 2024 - догадки и фантазии
Новогодний конкурс от TeachMeSkills
Переглядів 2656 місяців тому
Новогодний конкурс от TeachMeSkills
ВСЯ ПРАВДА ОБ АЙТИ БЕЗ ШУТОК
Переглядів 26 тис.6 місяців тому
ВСЯ ПРАВДА ОБ АЙТИ БЕЗ ШУТОК
Какие бывают дизайнеры?
Переглядів 1,1 тис.6 місяців тому
Какие бывают дизайнеры?
Кто такие тестировщики?
Переглядів 3,6 тис.6 місяців тому
Кто такие тестировщики?
Front End против Back End - что важнее?
Переглядів 12 тис.6 місяців тому
Front End против Back End - что важнее?
Как выбрать язык программирования?
Переглядів 8 тис.7 місяців тому
Как выбрать язык программирования?
PM против BA - кто важнее?
Переглядів 2,3 тис.7 місяців тому
PM против BA - кто важнее?
Как пройти собеседование на Java разработчика
Переглядів 16 тис.7 місяців тому
Как пройти собеседование на Java разработчика
Что такое UX/UI дизайн?
Переглядів 3,2 тис.7 місяців тому
Что такое UX/UI дизайн?
Как начать учить программирование ?
Переглядів 6 тис.8 місяців тому
Как начать учить программирование ?
Что такое Java?
Переглядів 15 тис.8 місяців тому
Что такое Java?
Что такое C# и .Net?
Переглядів 38 тис.8 місяців тому
Что такое C# и .Net?
Что такое Data Science?
Переглядів 1,3 тис.9 місяців тому
Что такое Data Science?
Как стать Android-разработчиком в 2023 году?
Переглядів 16 тис.9 місяців тому
Как стать Android-разработчиком в 2023 году?
Собеседование PM (Project Manager)
Переглядів 41 тис.9 місяців тому
Собеседование PM (Project Manager)
Есть ли жизнь после IT курсов?
Переглядів 3,4 тис.10 місяців тому
Есть ли жизнь после IT курсов?
Что такое Front End и стоит ли его изучать в 2023 году?
Переглядів 23 тис.10 місяців тому
Что такое Front End и стоит ли его изучать в 2023 году?

КОМЕНТАРІ

  • @user-xs4fi9jp6q
    @user-xs4fi9jp6q 5 годин тому

    Очень много терминов которые не расшифровываются, и тогда уже не понятно для кого это видео)

  • @karatsergio4472
    @karatsergio4472 21 годину тому

    было чилово и интересно , лайкос

  • @RazvlekaykaBY
    @RazvlekaykaBY День тому

    КРУТО! Мой игровой опыт в разные жанры игр более 25 лет! Есть опыт в разработке собственных игр, на юнити и прочих игровых движках. Есть опыт разработки клиент серверных приложений, и серверов онлайн игр. Есть опыт разработки сайтов на php и программ на C#. Но есть одно но, я почему-то ещё не геймдизайнер)). Наверное лицом не вышел.

  • @user-qg6fn3qx9m
    @user-qg6fn3qx9m День тому

    Если коротко питон это велосипед, c# автомобиль) ...

  • @sergshutk2757
    @sergshutk2757 День тому

    Учите Pascal (Object Pascal). Уже писали?

  • @irinausatova1829
    @irinausatova1829 2 дні тому

    Спасибо за видео! Очень полезно было освежить знания)

  • @user-vi6fu5ci4n
    @user-vi6fu5ci4n 2 дні тому

    Я к вам зашёл на сайт, в разделе преподаватели, в с# у вас 2 Павла ) один в Epam, там всё ок, второй не на должности тех лид в компании HiQo Solutions, а HiQo Solutions в Tech Lead | :D

  • @nadirnazirov4707
    @nadirnazirov4707 3 дні тому

    Если php постепенно становится типизированным и оопшным, то зачем его учить, а не java? Ведь со всем этим багажом он станет таким же сложным...

  • @Viktor123Viktor
    @Viktor123Viktor 3 дні тому

    Первым языком надо выбирать ASM - для того чтобы получить понимание что такое рабочий цикл, что такое память и как к ней обращаться. Затем - да, C++. А дальше спокойно менять ЯП в зависимости от конкретных задач.

  • @user-yz8em9oz2h
    @user-yz8em9oz2h 3 дні тому

    пс за инфу

  • @tsc472
    @tsc472 4 дні тому

    На тему того что микросервисы более современный подход - а как же unix-way, чем не микросервисы? Если еще в inetd завернуть - натуральный же микросервис будет

  • @brunka09
    @brunka09 4 дні тому

    не поняла это интервью или экзамен?

  • @smrsgv
    @smrsgv 4 дні тому

    четко выдал базу, спасибо за труд!

  • @vitteeee
    @vitteeee 5 днів тому

    Тупая реклама,дизлайк

    • @teachmeskills
      @teachmeskills 5 днів тому

      Снимите умную. Поставим лайк

  • @aidaberdaliyeva160
    @aidaberdaliyeva160 5 днів тому

    Менеджер можно же говорить?? Бесит😂

  • @MoNsTeR-ww9qj
    @MoNsTeR-ww9qj 7 днів тому

    Как по мне C# для новичка - это сбалансировано абстрактный язык. Он не супер абстрактный как Python но и не супер подробный как C/C++. C# для меня это про контроль и стабильность. Python про быстроту (с точки зрения разработки) и простоту. Я хоть и люблю C#, но упаси вас бог пытаться как новичку понять как сделать например считывание и эмуляцию нажатия клавиш на шарпах. На питоне я это сделал за 15-20 минут установив нужную библиотеку, в которой было всё что нужно.

    • @vitalii5209
      @vitalii5209 3 дні тому

      А в чем проблема на С# установить такую же библиотеку, в которой будет все что нужно?

  • @maksymyegorov631
    @maksymyegorov631 8 днів тому

    Ребята, я зашёл к вам на сайт и посмотрел раздел обучения 1с разработки. Проверьте пожалуйста, может там опечатки в оплате? Если там нет ошибок, то нужно видео для ознакомления с этим направлением разработки. Спасибо!

    • @teachmeskills
      @teachmeskills 8 днів тому

      доброго дня! вроде, все ок в разделе оплаты, только проверил) видео сделаем. спасибо вам)

    • @maksymyegorov631
      @maksymyegorov631 8 днів тому

      @@teachmeskills Да-да, думаю в наше время санкций и замещения всего и вся, возможно это направление становится всё актуальнее и актуальнее. Вам спасибо! С нетерпением жду видео!

    • @maksymyegorov631
      @maksymyegorov631 8 днів тому

      @@teachmeskills кстати, я имел ввиду оплату труда senior developer. Это реальные цифры?

    • @teachmeskills
      @teachmeskills 7 днів тому

      @@maksymyegorov631 по 1С направлению или по Инженеру данных?

    • @maksymyegorov631
      @maksymyegorov631 7 днів тому

      @@teachmeskills Я имел ввиду 1С разработчика. У вас ползунок доходит до 4к у senior это больше чем специалисты других направлений. Но теперь думаю всё реально.

  • @ivansemenov3399
    @ivansemenov3399 8 днів тому

    Введите на hh ключевое слово JavaScript и Java по Москве По JavaScript 3,400 вакансий По Java 3,800 на текущий день.

  • @youcursed4561
    @youcursed4561 8 днів тому

    какая она красавица!!!

  • @barackobama2722
    @barackobama2722 9 днів тому

    После того какие сейчас люди в ИТ, мне хочется юзать их как рабов которые ничего не стоят!

  • @scc-6
    @scc-6 9 днів тому

    Видно, что он гошник, но катить бочку на Ноду...

  • @scc-6
    @scc-6 9 днів тому

    С# по бенчмаркам быстрее го

  • @MariaEsenina
    @MariaEsenina 10 днів тому

    Прямо с самого начала рука потянулась к револьверу после слов про Python и машинное обучение: всю индустрию за*рали питоном, срок годности проектов которого составляют пол года - год, выходят новые версии, легаси и зависимости тут же рушатся и потом вручную приходится всё это чинить. Честное слово, парень в белом выглядел умнее и более презентабельным, пока не начал говорить.

    • @user-mq5ld6yp4f
      @user-mq5ld6yp4f 7 днів тому

      Возможно вы совсем не понимаете разницу между задачами, которые решают люди, занимающиеся машинным обучением, и обычными программистами. Задача первых часто заключается в том, чтобы провести огромную кучу разных экспериментов с данными для получения лучшей модели, решающей одну конкретную задачу. Для этого нужно писать очень много кода, который иногда нужен всего раз - для обучения модели. Задача вторых - построить стабильную сложную систему с кучей задач, возможностью тестирования и так далее. В том числе обычные программисты часто встраивают в систему модели, обученные их коллегами (не обязательно что модель, которая создавалась с помощью Python будет дальше использоваться именно на Python). Их код будет выполнятся очень много раз и на протяжении долгого времени. Так вот Python отлично подходит для людей, занимающимися машинным обучением, ведь для них не так важна надёжность. Их код выполняют зачастую только они сами, а не выпускают его в прод для реальных пользователей. В то же время Python действительно может быть проблемным для обычных программистов, если не проявлять достаточной усердности в покрытии кода тестами, обнаруживающими ошибки, которые легко мог бы найти компилятор, если бы проект был написан например на C#.

    • @MariaEsenina
      @MariaEsenina 7 днів тому

      @@user-mq5ld6yp4f проблема не в надёжности, а в том, что Python может сломать совместимость от версии к версии и вам на одном железе приходится использовать сразу несколько рантаймов и зависимостей чтобы проекты разных лет работали, т.к. переписывать (а иногда и переобучать) нейронку времени нет. Это заведомо дурной дизайн и трата времени на борьбу с зависимостями. То есть написать может и легко (хотя это спорно, и не сложнее, чем на C#), а поддерживать просто нереально, т.к. "добренькая" nVidia возьмёт и всё сломает в следующей версии tensorflow к примеру перейдя на новый рантайм, который в свою очередь будет плохо дружить со старыми зависимостями. В итоге объём работы тупо увеличивается, если вам нужно поднять проект 1-2 летней давности. То есть ваша прошлая работа зачастую превращается в тыкву. И ЭТО ПРОБЛЕМА ДЛЯ БИЗНЕСА В ПЕРВУЮ ОЧЕРЕДЬ!

  • @user-vf3ge6ec3h
    @user-vf3ge6ec3h 10 днів тому

    Господи, какая каша в голове у человека. Он больше запутывает, чем объясняет. Слишком много воды и лишних слов…

  • @Dontdolbaeb
    @Dontdolbaeb 10 днів тому

    Stardew Valley хотя и на самописном движке, но всё ещё на c#

  • @sergk1393
    @sergk1393 10 днів тому

    В конце звуку стало очень плохо) Спасибо за классный видос! Много откликнулось в словах спикера!)

  • @SnegovikMorkovi4
    @SnegovikMorkovi4 10 днів тому

    дикция у чела кошмарная, просто жрет слова целиком

    • @teachmeskills
      @teachmeskills 10 днів тому

      Ну я вашу не слышал для сравнения. Может, вы тоже хомячите слова и советы раздаете)

    • @SnegovikMorkovi4
      @SnegovikMorkovi4 10 днів тому

      @@teachmeskills когда я буду снимать ролики, тогда можете критиковать, а сейчас хомячьте нашу критику

    • @teachmeskills
      @teachmeskills 10 днів тому

      @@SnegovikMorkovi4 просто это не та критика, которую хочется получать. Первое - она единичная за все время канала (имхо, это субъективная точка зрения), второе - если вы эксперт по речи, постановке голоса, то дайте отсылку как надо; третье - сама форма подачи («жрет» и т.д.) - без обид, не совсем профессионально звучит. Так что, слушать не заставляю. Как снимите, кидайте ссылку. Оценю вашу дикцию

  • @user-vs3tt8xc6j
    @user-vs3tt8xc6j 10 днів тому

    Если речь идет о непрерывном обучении, чтобы поддерживать или наращивать квалификацию, то обучение идет при решении рабочих задач + хотябы 1 час в день на освоение совсем нового для себя. Если речь идет об обучении себя с нуля до профессионального уровня, то кодить надо каждый день, фул-тайм. Кодить, разбирать чужой код, исправлять чужой и свой код, решать задачи несколькими способами, анализировать решение и т.д. Только так можно наработать навык, понимание и немного раскачать свои мозги.

  • @YuryFury
    @YuryFury 12 днів тому

    Есть идеи/концепты для небольших игр, но нет технической базы. Где найти программиста, который сможет их воплотить?

  • @flexterion
    @flexterion 13 днів тому

    "C++ против JavaScript" еще бы назвали

  • @Abilovv599
    @Abilovv599 13 днів тому

    На маке больно? Никогда не было проблем.

  • @Abilovv599
    @Abilovv599 13 днів тому

    Все языки и инструменты хороши, но пайтон рядом не стоит с сишарпом))

  • @Hammered_cucumber
    @Hammered_cucumber 13 днів тому

    Rust

  • @alexger97
    @alexger97 13 днів тому

    Нда, два полупокера Нормальных спикеров не было ?

    • @simonpirko
      @simonpirko 8 днів тому

      你自己也是个半开玩笑的人

  • @kerturstream576
    @kerturstream576 14 днів тому

    Где то с 35 минут начинает лагать звук :(

    • @teachmeskills
      @teachmeskills 13 днів тому

      да, есть косячок. так и не понял, из-за чего накладка случилась со звуком. в след раз попробуем не лажать)

  • @user-ye8ll1ll9k
    @user-ye8ll1ll9k 14 днів тому

    Сейчас нужны с зарплатой джуны со знанием сениор

  • @user-oi4ch8ty3i
    @user-oi4ch8ty3i 15 днів тому

    Огромное Спасибо Братья за моральную поддержку про не сдаваться. Прям подняли дух. Благодарю.

  • @user-jc3ng3qq8q
    @user-jc3ng3qq8q 15 днів тому

    Да уж... Жаль тебя Илья, что тебе попался Денис... Ни один его ответ не отвечает на поставленный вопрос. Везде плавает, сложные обороты. Как его понимает его команда???

    • @teachmeskills
      @teachmeskills 13 днів тому

      мне тут сложно сказать за команду, но по менторству скажу точно, что Денис отлично справляется и его ученики показывают хороший результат. возьму в проработку данное замечание, попробуем в следующий раз больше конвертики дать) спасибо за замечание)

  • @Werumag
    @Werumag 15 днів тому

    Мало, очень мало, надо больше :). Осветили лишь малую долю вопросов. Надеюсь на продолжение.

    • @teachmeskills
      @teachmeskills 15 днів тому

      Вот же голод - шальная штука) сделаем)

  • @vitaliishveider6384
    @vitaliishveider6384 15 днів тому

    Частный метод? Первый раз такое слышу. Если тут про приватные методы. То может.

    • @teachmeskills
      @teachmeskills 15 днів тому

      да, он самый. спасибо за замечание!

  • @14bbb88
    @14bbb88 15 днів тому

    ИДЕ от JetBrains также покупаешь. После подписки у тебя навсегда остается последняя актуальная версия на момент окончания подписки

  • @Das.Kleine.Krokodil
    @Das.Kleine.Krokodil 16 днів тому

    Не понятно зачем была вводная фраза

  • @whitelight8811
    @whitelight8811 16 днів тому

    html для бекенда топ

  • @denislopatkin6996
    @denislopatkin6996 16 днів тому

    Неделя две для переучивания на котлин? ))) смешно и наивно

  • @user-uv8iw8lc6h
    @user-uv8iw8lc6h 17 днів тому

    лучше вообще не писать на пайтоне

  • @user-uv8iw8lc6h
    @user-uv8iw8lc6h 17 днів тому

    лучше вообще не писать на пайтоне

  • @svetlanaterekhova7054
    @svetlanaterekhova7054 18 днів тому

    Java спец сидит по чёрную сторону от ведущего Да прибудет с нами сила!

  • @PaulSith
    @PaulSith 18 днів тому

    Ох уж эти наркоманы классификаторы ... Программа может делать , что от неё хотят ... может нет ... Остальные философские бредни ... надуманы!

  • @ramforinh
    @ramforinh 18 днів тому

    Такой ерундой я не занимался даже когда впервые столкнулся с языком с динамической типизацией. Единственное исключение - переменная может иметь значение None.

  • @user-qq7be6yo4b
    @user-qq7be6yo4b 18 днів тому

    2 часа компиляции? Чего компилируешь-то? Последнюю версию Windows? :)) Или сидишь на 386-м компе 90-х годов? :))

    • @JinOptimist
      @JinOptimist 14 днів тому

      Самые обычный легаси проект, которому 15+ лет. Которые всё ещё монолит. Судя по вашему удивлению, вам никогда не приходилось работать на проектах, где только исходники до билда весят Гигабайты. А база размером в терабайты. На таких объёмах появляются свои специфичные условия работы. Например, 2 часа компиляции.

    • @user-qq7be6yo4b
      @user-qq7be6yo4b 14 днів тому

      @@JinOptimist , понятное дело. Кривой код с кривой архитектурой, сварганенный непонятно кем кривыми руками. Тогда нет вопросов :)

    • @JinOptimist
      @JinOptimist 13 днів тому

      ​@@user-qq7be6yo4b У вас как я понимаю за плечами не один проект продолжительностью 15+ лет. И все они работают как часы, без единого костыля, с самой красивой, понятной, кристальной архитектурой. А главное все 100+ девов что работали над этим проектом, все эти годы, обладают теми же сверхъестественными способностями что и вы... У меня вот, даже фантазии не хватает такое представить, а для вас это норма. Здорово!