2ГИС · Москва · удалённо
2ГИС Удаленно, Москва
Имеет 3+ лет опыта на позиции Data Engineer / Big Data Engineer. Хорошо понимает, как работает Spark и умеет его готовить. Работал с ClickHouse и знает, как "выжать" из него максимум. Знаком с построением дата-архитектуры (DWH, Lake, OLAP, ETL/ELT, Data Governance). Умеет проектировать пайплайны под отказоустойчивость. Хорошо владеет одним из языков программирования (например, Python или Scala). Знает SQL и может читать логику отчётов без боли.
Опыт построения дата-платформ (Self-Service инструменты и процессы). Опыт работы с высоконагруженной Kafka (десятки / сотни тысяч событий в секунду). Знание инструментов мониторинга и автоматического контроля качества данных (Data Quality, Data Contracts). Опыт построения Data Lineage и работы с Data Catalog. Инфраструктурный опыт: Docker, Kubernetes, CI/CD.
Подробнее о вакансии
🔥Data Engineer (SMT) 2ГИС Удаленно, Москва Требования: ✅Имеет 3+ лет опыта на позиции Data Engineer / Big Data Engineer. ✅Хорошо понимает, как работает Spark и умеет его готовить. ✅Работал с ClickHouse и знает, как "выжать" из него максимум. ✅Знаком с построением дата-архитектуры (DWH, Lake, OLAP, ETL/ELT, Data Governance). ✅Умеет проектировать пайплайны под отказоустойчивость. ✅Хорошо владеет одним из языков программирования (например, Python или Scala). ✅Знает SQL и может читать логику отчётов без боли. Плюсом будут: ✅Опыт построения дата-платформ (Self-Service инструменты и процессы). ✅Опыт работы с высоконагруженной Kafka (десятки / сотни тысяч событий в секунду). ✅Знание инструментов мониторинга и автоматического контроля качества данных (Data Quality, Data Contracts). ✅Опыт построения Data Lineage и работы с Data Catalog. ✅Инфраструктурный опыт: Docker, Kubernetes, CI/CD. Подробнее о вакансии 🔎