Вакансия data engineer в VK - Москва

Data Engineer

Оплачиваемая стажировка

Полный день

Москва

IT

Больше 1 года

  • Ого, а вакансия — удаленная! Можно будет пить кофе дома из любимой кружки и слушать любимые песни без наушников.
  • Тот самый вайб сериала «Офис» или кофе-брейки с коллегами на кухне, где пахнет печеньем и любимым чаем. Самое время погрузиться в офисную атмосферу >>
  • Обучение от экспертов компании — звучит круто! Это почти как второе образование, а знания можно сразу применить на практике.
Откликнуться
VK
VK
IT
Топ 2 в рейтинге BCA
Так называют эту вакансию в компании
Data Engineer
...
Откликнуться

Обязанности

  • участвовать в создании инструментов машинного обучения (Machine Learning);
  • разрабатывать и поддерживать код на Scala/Spark (UDF/UDAF, Spark ML Transformers и другие) и Python (платформа Machine Learning/ETL);
  • помогать команде следить за качеством генерируемых данных;
  • работать с данными популярных социальных сетей (ВКонтакте, Одноклассники, Дзен) и других проектов экосистемы VK;
  • проектировать, разрабатывать и поддерживать инструменты для создания надежных пайплайнов обработки данных;
  • участвовать в развитии системы для создания и использования моделей машинного обучения (Machine Learning);
  • исследовать и интегрировать в продукт новые источники данных;
  • создавать витрины признаков для моделей машинного обучения (Machine Learning).
  • Требования

  • знание алгоритмов и структур данных;
  • умение писать качественный, поддерживаемый код на Scala, Python, SQL;
  • опыт использования Hadoop, знание механизмов распределенного хранения и обработки данных (HDFS, Spark, Hive);
  • знакомство с Git, Linux, Docker;
  • опыт работы с терминалом по SSH.
  • Условия

  • минимум бюрократии и максимум возможностей влиять на продукт;
  • воплощение функций от идеи до релиза может занимать всего пару недель;
  • кластер Hadoop на примерно 100 петабайт.
  • Откликнуться
    Обязательно укажите, что узнали о стажировке от Changellenge >>
    Опубликована
    23.01.2025 2025-01-23T00:00:00

    Похожие стажировки