Data Engineer

SimbirSoft

Data Engineer

Зарплата не указана

Формат: Можно удалённо

Основной стек проекта: Python, Greenplum, PostgreSQL, ClickHouse, Data Build Tool (DBT), Spark, Kafka, Airflow, Kubernetes, Terraform, Ansible, GitLab, SonarQube, Prometheus, Grafana, AlertManager.

Обязанности:

Организация пайплайнов потоков данных (конвейера движения данных в компании);

Разработка, поддержка и оптимизация производительности Корпоративного Хранилища Данных (EDWH);

Разработка и настройка ETL/ELT-процессов в Корпоративное Хранилище Данных (сбор, структурирование и обеспечение сохранности данных);

Настройка инфраструктуры для обеспечения качества данных;

Разработка BI дашбордов, визуализации данных.

Требования:

Обязателен опыт работы с технологиями: Greenplum или другая MPP СУБД, ClickHouse, Airflow.

Хорошее знание SQL и реляционных баз данных (желательно, Greenplum или PostgreSQL), опыт написания сложных запросов;

Хорошее знание Python;

Знание современных технологий обработки больших данных;

Высшее образование (IT/математика/математическая статистика/физика ).

Откликнуться

Вакансии на Python разработчика -> PythonWork

Вопросы с собесов -> ProstoPython

What You'll Do

• Организация пайплайнов потоков данных (конвейера движения данных в компании);
• Разработка, поддержка и оптимизация производительности Корпоративного Хранилища Данных (EDWH);
• Разработка и настройка ETL/ELT-процессов в Корпоративное Хранилище Данных (сбор, структурирование и обеспечение сохранности данных);
• Настройка инфраструктуры для обеспечения качества данных;
• Разработка BI дашбордов, визуализации данных.

Basic Qualifications

• Обязателен опыт работы с технологиями: Greenplum или другая MPP СУБД, ClickHouse, Airflow.
• Хорошее знание SQL и реляционных баз данных (желательно, Greenplum или PostgreSQL), опыт написания сложных запросов;
• Хорошее знание Python;
• Знание современных технологий обработки больших данных;
• Высшее образование (IT/математика/математическая статистика/физика).
• Откликнуться
• Вакансии на Python разработчика -> PythonWork
• Вопросы с собесов -> ProstoPython

Preferred Qualifications

• Хорошее знание Python;
• Знание современных технологий обработки больших данных;
• Высшее образование (IT/математика/математическая статистика/физика).
• Откликнуться
• Вакансии на Python разработчика -> PythonWork
• Вопросы с собесов -> ProstoPython