Ozon
Data Engineer, Ozon fresh
Ключевые навыки
Описание
Ozon fresh — одно из самых перспективных и быстроразвивающихся направлений компании, которое является сервисом быстрой доставки свежих продуктов питания, товаров повседневного спроса, бытовой техники, электроники и других категорий. Мы ищем Data engineer в группу товародвижения в отдел Data Science. Мы поддерживаем и развиваем проект автоматического заказа поставщикам для оптимального пополнения наших складов товарами. Это позволяет поддерживать большинство наших товаров доступными к покупке при минимизации издержек на хранение и списания.
Вы будете
- Писать алгоритмы обработки больших данных (несколько сотен миллионов строк в таблице). - Исследовать и подготавливать данные. - Оптимизировать текущие вычисления. - Заниматься продуктивизацией алгоритмов и их сопровождением. - Делать ревью кода и анализ инцидентов.
Нам важно
- Наличие опыта в роли Data engineer от 2 лет. - Высшее математическое или техническое образование. - Уверенное владение Python, PySpark, SQL. - Знание устройства Hadoop, HDFS, Hive. - Опыт работы с системами контроля версий (Git). Будет плюсом - Опыт работы с Go . - Опыт работы с Airflow. - Опыт работы с DBT.
Наш стек
- Python, Pyspark, PostgreSQL, Clickhouse, Kafka, Memcashed, Redis, Hadoop, Airflow