Data Engineer

Обязанности

• собирать требования с бизнес-заказчиков и анализировать источники данных;
• разрабатывать, реализовывать и поддерживать типовые потоковые интеграционные решения на стеке технологий, принятых в команде: Trino, Iceberg, S3, Spark, Apache Airflow, Kafka, Cosmos, Flink;
• оперативно реагировать на информацию о проблемах в зоне ответственности, выполнять типовые задачи в установленный срок;
• поддерживать в актуальном состоянии документацию типовых интеграционных решений платформы больших данных;
• предоставлять отчетность о своей деятельности руководителю.

Требования

• общее представление о стеке технологий Lakehouse;
• понимание различия работы между BigData/Lakehouse и с данными обычного размера;
• знание SQL (индексы, функции, оптимизация, профилирование производительности);
• опыт работы с любой реляционной БД (Oracle, Postgres, MySQL, MsSQL, DB2 и т.п.);
• умение работать с Git (знание команд git pull/commit/push);
• опыт работы с DBT, Cosmos;
• представление о работе с Trino;
• понимание устройства Iceberg, форматов данных;
• понимание работы с minio или любого другого хранилища на основе S3;
• опыт использования систем ведения проектов и документации;
• знание основ программирования (JAVA, Python).

Условия

• официальное оформление с белой заработной платой;
• полугодовые премии по результатам работы;
• возможность работать удаленно или в гибридном формате;
• удобный офис рядом с метро «Добрынинская» / удобный офис с бесплатной парковкой на метро «Волгоградский проспект» / МЦД «Калитники»;
• гибкий график работы;
• широкий пакет добровольного медицинского страхования (включая выезд за рубеж и стоматологию), страхование жизни и здоровья;
• возможность учиться и развиваться за счет компании: внешние тренинги и семинары по профессиональным тематикам, участие в крупнейших конференциях страны, программы развития цифровых и управленческих навыков (Цифровая академия, Школа Тимлидов), онлайн и офлайн мастер-классы, корпоративный университет «X5 Полка», школа наставников и многое другое;
• программы мотивации для спикеров и авторов: внутренняя школа Speak Up School, Write Up, ачивки и баллы за выступления, подготовка спикеров к крупнейшим конференциям страны, сообщество авторов на Хабре, возможность делиться опытом с комьюнити внутренних и внешних экспертов;
• обмен опытом через сообщества: 12 технических комьюнити от java до devops;
• яркая корпоративная жизнь с большим количеством мероприятий, конкурсов и возможностей для творческой реализации: регулярные внутренние митапы, демо-дни, открытые микрофоны, день IT-специалиста, программы волонтерства, корпоративное предпринимательство X5 Idea Challenge;
• забота о благополучии сотрудников: 7 спортивных сообществ (бег, футбол, волейбол, баскетбол, хоккей, лыжи, триатлон), ежегодная Неделя здоровья;
• скидки в экосистеме бизнесов Х5 («Пятерочка», «Перекресток», «Много лосося», «Перекресток Впрок»);
• программа привилегий Prime-zone (скидки на товары и услуги и специальные предложения от компаний-партнеров);
• материальная помощь сотрудникам, попавшим в сложную жизненную ситуацию;
• помощь в обучении и развитии;
• обучение круто рассказывать о том, что вы делаете;
• внутренняя школа спикеров и авторов;
• возможность участвовать в крупнейших конференциях страны и прокачать личный бренд;
• совместная прокачка hard skills и soft skills;
• корпоративный университет, онлайн-библиотека, программы развития управленческих навыков;
• дистанционные курсы на образовательных платформах;
• тренинги, митапы и вебинары;
• предоставление не просто социального пакета, а пакета с пакетами;
• награждение плюшками передовой компании;
• удаленный или гибридный формат работы;
• премии по результатам работы;
• забота о здоровье;
• широкий пакет добровольного медицинского страхования со стоматологией;
• онлайн-психотерапия от «Ясно»;
• предоставление скидок сотрудника;
• «Пятерочка», «Перекресток», «Много лосося», «Перекресток Впрок», а также программа привилегий Prime-zone;
• показ, насколько яркой может быть корпоративная жизнь;
• организация встреч с топ-менеджментом: слышим и открыто делимся планами и результатами;
• поощрение активности сотрудников;
• за участие в жизни компании награждаем ачивками и баллами, на которые можно купить классный мерч;
• развитие корпоративных сообществ;
• технические, лайфстайл, спортивные или все сразу? Выбирать вам!;
• организация благотворительных ярмарок, выезды в приюты и субботники;
• помощь в реализации;
• корпоративное предпринимательство X5 Idea Challenge;
• организация масштабных праздников;
• корпоративы, день рождения компании, новый год, день IT-специалиста, день спасибо.