Data Engineer( Bell Integrator )

Описание вакансии

компания "bell integrator"

по вакансии офисный формат работы в москве

bell integrator – аккредитованная ит-компания и являемся частью большой семьи гк softline. bell integrator активно реализует проекты по всей россии, среди наших заказчиков – крупнейшие системообразующие финансовые, телеком и ритейл компании страны.

требования:
sql на продвинутом уровне (аналитические функции, подзапросы, хранимые процедуры, оптимизация производительности).
cтек технологий big data (hadoop, spark, hive/impala) и любой субд.
знание понятий и концепций dwh
python (pyspark, pandas, numpy, rest api);
airflow/dagster/oozie
bitbucket\\git
bash

обязанности:
загрузка, очистка и трансформация больших объемов данных из различных источников (rdbms, hadoop, плоские файлы) в рабочую область (платформы hadoop)
проектирование и разработка аналитических витрин данных
проектирование и разработка коннекторов для etl процессов
мониторинг и оптимизация процессов загрузки, преобразования данных и сборки витрин
разработка, поддержка и оптимизация инфраструктуры и внутренних сервисов для обработки больших объемов данных;
разработка инструментов для автоматизации рутинных задач, связанных с обработкой данных

условия:
возможность профессионального и карьерного роста в компании
возможность поучаствовать в разных проектах
оформление в соответствии с тк рф