fokcus

Senior Data Engineer

Bilim.Group · удалённо · проект

senior
Свежая вакансия Появилась 21 дн назад

Должность: Senior Data Engineer Место работы: Bilim Group Заработная плата: 1 300 000 - 1 500 000 тенге

Обязанности

  • Загрузка и регулярное обновление мастер- и справочных данных платформы: госзаказ, справочники, система специальностей и квалификаций, контингент, дипломы, оценки, аттестаты, директора, обновления по колледжам
  • Поддержка и разработка конвейеров ingestion (ETL): каталоги / атрибуты /оркестрация
  • Нормализация, валидация и маппинг данных из разнородных и легаси-форматов; постоянный контроль качества загрузок
  • Сопровождение контрактов данных на стыке с CDC-контуром (Mongo → Kafka → PostgreSQL, Pub/Sub со смежными сервисами)
  • Сопровождение методологии отчетности и выгрузок: поддержка рабочих отчетов, участие в регулярной подготовке государственной отчётности
  • Документирование пайплайнов, структуры данных и методологии

Требования

Технические навыки

  • Python для ETL: Polars / pandas, пайплайны as-code
  • Оркестрация пайплайнов: Temporal (или Airflow-подобные)
  • Базы данных и хранилища: PostgreSQL, MongoDB
  • Моделирование и обработка справочных / мастер-данных: нормализация, версионирование, маппинг разнородных форматов
  • Потоковые данные и CDC: Kafka, MongoDB, Pub/Sub, Debezium

Желательно обладать опытом в предметной области

  • Структура государственных образовательных данных РК: знание профильных систем — сильное преимущество
  • Гос. форматы и справочники: понимание форматов государственных данных, справочников (КАТО и др.), ЭЦП и согласий в государственных потоках
  • Реверс-инжиниринг данных: способность восстанавливать недокументированную структуру данных и методологию отчётов и доводить их до документации

Условия

  • Прокачка знаний — доступ к курсам Kitap.kz, Bilimland.com, Lerna.kz и другим образовательным платформам
  • Языки — легко: изучай иностранные на Qlang.kz в удобном тебе ритме
  • Кафетерий льгот — спорт, здоровье, обучение. Ты сам выбираешь, что важно
  • BYOD — если работаешь со своим ноутом, мы это компенсируем

Контакты для связи

@vassilinap / vassilina.p@bilimland.com

Ссылка на вакансию

Навыки

PythonPolarspandasTemporalAirflowPostgreSQLMongoDBKafkaPub/SubDebezium
Показать как в источнике 
#jobs 
📍 Формат: Удаленный
✔️ Должность: Senior Data Engineer
🏢 Место работы: Bilim Group
💸 Заработная плата: 1 300 000 - 1 500 000 тенге

📈 Обязанности:
- Загрузка и регулярное обновление мастер- и справочных данных платформы: госзаказ, справочники, система специальностей и квалификаций, контингент, дипломы, оценки, аттестаты, директора, обновления по колледжам

- Поддержка и разработка конвейеров ingestion (ETL): каталоги / атрибуты /оркестрация

- Нормализация, валидация и маппинг данных из разнородных и легаси-форматов; постоянный контроль качества загрузок

- Сопровождение контрактов данных на стыке с CDC-контуром (Mongo → Kafka → PostgreSQL, Pub/Sub со смежными сервисами)

- Сопровождение методологии отчетности и выгрузок: поддержка рабочих отчетов, участие в регулярной подготовке государственной отчётности

- Документирование пайплайнов, структуры данных и методологии

📌 Требования:
Технические навыки
- Python для ETL: Polars / pandas, пайплайны as-code
- Оркестрация пайплайнов: Temporal (или Airflow-подобные)
- Базы данных и хранилища: PostgreSQL, MongoDB
- Моделирование и обработка справочных / мастер-данных: нормализация, версионирование, маппинг разнородных форматов
- Потоковые данные и CDC: Kafka, MongoDB, Pub/Sub, Debezium

Желательно обладать опытом в предметной области:
- Структура государственных образовательных данных РК: знание профильных систем — сильное преимущество
- Гос. форматы и справочники: понимание форматов государственных данных, справочников (КАТО и др.), ЭЦП и согласий в государственных потоках
- Реверс-инжиниринг данных: способность восстанавливать недокументированную структуру данных и методологию отчётов и доводить их до документации

 ✅ Условия:
- Прокачка знаний — доступ к курсам Kitap.kz, Bilimland.com, Lerna.kz и другим образовательным платформам
- Языки — легко: изучай иностранные на Qlang.kz в удобном тебе ритме
- Кафетерий льгот — спорт, здоровье, обучение. Ты сам выбираешь, что важно
- BYOD — если работаешь со своим ноутом, мы это компенсируем

📢❗️🚨 Контакты для связи: 
@vassilinap / vassilina.p@bilimland.com

🌐 Ссылка на вакансию
Пожаловаться

Похожие вакансии