Data Engineer

Для проекта Data Catalog ищем в команду Data Engineer уровня Middle.

Data Catalog – приложение для поиска информации о данных компании по метаданным.

Стек: Python, SQL Oracle, Apache Airflow, Docker, API, Linux.

Какие ждут задачи:

• Участие в разработке системы Data Catalog;
• Настраивание автоматической загрузки данных ETL в базу данных (Apachе Airflow);
• Создание парсера для загрузки данных из различных систем;
• Администрирование процессов загрузки данных в базу данных;
• Настраивание мониторинга работы системы и оценка эффективности ее работы;
• Взаимодействие со смежными командами аналитиков и разработчиков, активное участие в развитии системы.

Наши ожидания:

• Высшее образование в области математики, статистики, информатики, инженерии или других связанных областях;
• Опыт работы от 3-х лет на позиции инженера данных или с опытом от 1 года работы на позиции инженера данных на проекте разработки системы Data Catalog;
• Отличное знание Python;
• Опыт администрирования инфраструктуру ETL сервиса Apachе Airflow;
• Опыт работы с платформой Apache Kafka;
• Умение работать с Git, Jira, Confluence.
• Будет плюсом опыт работы с системой Apache Atlas.

• Офис в БЦ Виктория Олимп, г. Минск, Победителей, 103;
• Подробнее о нашей социальной политике и бенефитах можно узнать в профиле компании.