Job VC
Data Engineer
Проєкт передбачає забезпечення цілісності, доступності, безпеки та безперервності функціонування СУБД на базі PostgreSQL, а також розроблення регламентів резервного копіювання, відновлення та контролю продуктивності.
Обов'язки
Проєктування та розвиток структури баз даних (OLTP/OLAP)
Розробка та підтримка процесів ETL/ELT (автоматизація завантаження, очищення та трансформації даних)
Побудова та оптимізація вітрин даних (data marts) для аналітичних потреб
Інтеграція даних із зовнішніх джерел (API, файли, сторонні системи)
Забезпечення цілісності, консистентності та актуальності даних
Підготовка контрольних звітів та перевірок якості даних
Оптимізація продуктивності запитів та структури зберігання даних
Співпраця з аналітиками та BI-дизайнерами
Вимоги
Досвід розробки та супроводу баз даних
Впевнене володіння SQL
Розуміння принципів побудови сховищ даних (Data Warehouse)
Досвід реалізації ETL-процесів
Розуміння моделей даних (star schema, snowflake schema)
Досвід інтеграції даних з різних джерел
Уважність до якості даних та логіки обробки
Досвід роботи з PostgreSQL/MySQL/MS SQL/Oracle (або аналогами)
Досвід роботи з інструментами ETL (Airflow, dbt, Pentaho, Talend або подібні)
Базові знання Python або іншої мови для обробки даних
Досвід роботи з великими обсягами даних
Розуміння вимог аналітичної та управлінської звітності