Senior Data Engineer

IT-FINANCE - команда крутых специалистов, которые разрабатывают программное обеспечение для лидогенерации и fintech компаний.

Мы активно расширяемся и усиливаем нашу команду, поэтому сейчас ищем талантливого Senior Data engineer для участия в разработке и оптимизации нашей системы хранения данных.

Нам требуется Data Engineer, который возьмет на себя почетное звание нашего первого data engineer'a, развернет etl с нуля для нового dwh, а главное - сделает это идеально, базируясь на удобстве, эффективности и целесообразности, а не «потому что так исторически сложилось».

• создавать и оптимизировать пайплайны для сбора и обработки данных;
• контролировать качество данных;
• проектировать схемы для хранения данных;
• автоматизировать построения витрин данных;
• оптимизировать запросы;
• подготавливать техническую документацию;
• разрабатывать и оптимизировать витрины данных;
• проводить интеграцию различных источников данных в DataLake;
• создавать процессы репликаций в различные СУБД;
• оптимизировать и поддерживать существующие ETL-процессы;
• настраивать DQ-мониторинги и алертинги.

• опыт работы на позиции Data Engineer - от 3-х лет;
• навыки работы с SQL на экспертном уровне - аналитические функции, подзапросы, хранимые процедуры, оптимизация запросов под высокие нагрузки (MySQL, PostgreSQL);
• уверенное владение Python и библиотеками для работы с данными и построения ETL процессов, опыт работы с ETL-инструментами;
• знание Clickhouse, onETL, Airflow, Spark;
• опыт работы с Big data стеком (Hadoop, Hive, NiFi, GreenPlum);
• владение Git.

Будет плюсом:

• опыт работы с доставкой данных (Kafka, Flink).

Все обязательно пишут в этом пункте про конкурентный/высокий уровень зп, сплоченный коллектив, а также быстрый карьерный рост - об этом мы писать не будем (но само собой разумеющееся - у нас так), поэтому скажем о следующем:

• помимо заработной платы у нас прозрачная система бонусов за классную работу - ежеквартальные премии (до 50% от оклада), а также есть регулярная индексация по итогам квартальных performance reviews;
• все по-честному и в белую: оформление по ТК РФ с первого рабочего дня и вытекающие из этого соц. гарантии;
• полностью удаленная работа из любой точки мира (нам не важно в каком городе или в какой стране ты будешь находиться);
• гибкий график - учитываем режим сов, жаворонков и интровертов, а также у нас стандартная пятидневная рабочая неделя;
• забота о здоровье: программа ДМС со стоматологией и телемедициной, профессиональной психологической поддержкой и др.;
• предоставляем мощную технику с необходимыми характеристиками на выбор - ноут/десктоп, мак, линукс, винда;
• работа в коллективе крутых специалистов в сфере IT и FinTech, а также дружественная атмосфера без лишних формальностей.