Базы данных
Роль: Data Engineer
Объединённая компания Wildberries и Russ — это международная технологическая компания, образованная в результате слияния двух лидеров рынка — IT-компании Wildberries и оператора наружной рекламы Russ.
Команда занимается распознаванием и геопозиционированием объектов дорожной инфраструктуры по видеозаписям. Мы выполняем 2D реконструкцию, геопривязку, векторизацию и классификацию объектов для создания точных карт. А также при помощи SLAM и SFM, мы строим 2D и 3D модели городской среды, разрабатываем алгоритмы распознавания, сегментации и векторизации изображений на фото.
Чем предстоит заниматься:
- +Разрабатывать и поддерживать ETL/ELT-пайплайны обработки геоданных (адресные данные, дорожные графы, события трафика, пользовательские треки);
- +Обеспечивать сбор, очистку и нормализацию геоданных из различных источников (внутренние сервисы, внешние датасеты, телеметрия);
- +Подготавливать датасеты для ML-моделей геопоиска и маршрутизации (ранжирование результатов поиска, ETA, анализ трафика);
- +Разрабатывать хранилища и витрины данных для аналитики, алгоритмических сервисов и ML-команд;
- +Оптимизировать производительность обработки больших объёмов геоданных и обеспечивать надёжность пайплайнов;
- +Работать совместно с командами ML, алгоритмистов и backend-разработчиков над интеграцией данных в сервисы геоплатформы.
Требования:
- +Опыт работы Data-инженером от 3-х лет и опыт построения ETL/ELT-процессов;
- +владение Python, SQL, опыт работы с инструментами обработки больших данных, желательно владение Go или желание изучения (Основной язык сервисов);
- +опыт работы с системами обработки данных (Spark, Hadoop, ClickHouse, Kafka или аналогичные технологии), опыт работы и понимание архитектуры OpenSearch/ElasticSearch;
- +понимание принципов построения хранилищ данных и витрин для аналитики и ML;
- +опыт работы с большими объёмами данных и оптимизации пайплайнов обработки;
- +опыт работы с геоданными, треками или графами дорог будет преимуществом.
Условия:
- +Обучение и развитие: языковые клубы, собственный корпоративный университет, программы развития управленческих навыков и многое другое;
- +Благополучие сотрудников: корпоративный пакет ДМС со стоматологией, корпоративный спорт, консультации психолога и дополнительные возможности аккредитованной IT-компании;
- +Множество сообществ: клуб спикеров, футбола, йоги, шахмат и т.д.;
- +Забота о семьях: создаем условия, в которых легко сочетать карьеру и заботу о близких – от гибкого подхода до масштабных проектов для детей сотрудников;
- +Скидки и партнерские программы: на обучение, страхование, покупки и многое другое;
- +Комфортная рабочая среда: бесплатное питание в офисе, современные офисы рядом с метро, корпоративная техника и портал для сотрудников.