Data Engineer

В нашу команду мы ищем Data Engineer.

Задачи:

• Имплементация, оптимизация разнообразных по сложности и структуре пайплайнов обработки данных;
• Взаимодействие и интеграция с различными БД (rowstore, columnstore), работа с терабайтами данных;
• Построение высоконагруженных хранилищ данных;
• Организация и реализация процесса совершенствования Data Quality.

Требования:

Мы ожидаем, что Вы:

• Отлично знаете SQL и активно его применяете в деле, имеете опыт работы с различными БД;
• Пишете код на Python на уровне достаточном для DE;
• Строите ETL на Apache Airflow;
• Понимаете принципы построения DWH;
• Умеете работать с AMQP или Apache Kafka;
• Готовы обогащать данными DataLake;
• Имеете опыт работы с Clickhouse, ELK;
• Готовы к активному взаимодействию и командной работе, готовы понять, что нужно DS и DA, и сделать лучше;
• Не забываете про мониторинг всего написанного, цените Data Quality и тесты;
• Умеете отлаживать и валидировать свой или чужой код.

Условия:

• На данный момент готовы рассматривать кандидатов разных уровней, нам есть, чем с Вами поделиться в области знаний/опыта, а также будем рады узнать Ваше видение;
• Оформление в соответствии с ТК РФ;
• Заработная плата по результатам собеседования;
• График работы: 5/2, с 10:00 до 19:00;
• Месторасположение: г. Москва;
• Повышение квалификации, обучение.