Middle Data Engineer
Стабільний розвиток фахівця можливий лише за умови стабільності його команди. Ми в NIX шукаємо Middle Data Engineer, і ми впевнені, що такий фахівець буде продовжувати професійно зростати і зможе досягти нових кар’єрних висот.
ЧИМ ТИ БУДЕШ ЗАЙМАТИСЯ:
- Співпрацювати з власниками продуктів та керівниками команд для визначення, розробки та впровадження нових функцій для підтримки зростаючих потреб у даних.
- Створювати та підтримувати оптимальну архітектуру для вилучення, перетворення та завантаження даних з широкого спектру джерел даних, включаючи зовнішні API, потоки даних та озера даних.
- Впроваджувати вимоги щодо конфіденційності та безпеки даних, щоб забезпечити відповідність рішень стандартам і фреймворкам безпеки.
- Відстежувати та передбачати тенденції в інженерії даних і пропонувати зміни відповідно до цілей та потреб організації.
- Ділитися знаннями з іншими командами на різні теми, пов’язані з інженерією даних або проектами.
- Співпрацювати з командою, щоб вирішити, які інструменти та стратегії використовувати в рамках конкретних сценаріїв інтеграції даних.
ЩО ТОБІ ЗНАДОБИТЬСЯ:
- 3+ роки комерційного досвіду в інженерії даних.
- Сильні навички програмування на Python або Scala.
- Знання підходів, патернів та технологій розподілених обчислень (Spark, PySpark).
- Досвід взаємодії з будь-якою хмарною платформою (GCP, AWS, Azure) та її дата-орієнтованими компонентами.
- Навички з SQL та налаштуванням запитів.
- Розуміння принципів зберігання даних та концепцій моделювання (наприклад, знання типів моделей даних та термінології, включаючи OLTP/OLAP, SCD, (де)нормалізацію, розмірність, моделювання «зірка/сніжинка» тощо).
- Досвід використання будь-якої з перелічених реляційних баз даних (PostgreSQL, MSSQL або MySQL).
- Досвід з оркестровкою будь-яких потоків даних (наприклад, Apache Airflow, Prefect, Glue, Azure Data Factory).
- Мінімальний рівень англійської мови B2.
БУДЕ ПЕРЕВАГОЮ:
- Експертиза в принципах проєктування сховищ даних. Розуміння переваг та недоліків SQL/NoSQL рішень, їх типів та конфігурацій (автономні/кластерні, стовпчикові/рядкові, ключ-значення/документні сховища).
- Досвід побудови сучасних сховищ даних з використанням Snowflake, AWS Redshift або BigQuery.
- Глибокі знання внутрішньої структури Spark (налаштування, оптимізація запитів).
- Досвід з інтеграцією даних та архітектурою бізнес-аналітики.
- Практичний досвід з озерами даних та озерними будинками (Azure Data Lake, Apache Hudi, Apache Iceberg, Delta Lake).
- Досвід з контейнерним (Docker, ECS, Kubernetes) або безсерверним (Lambda) розгортанням.
- Добре знання популярних стандартів і форматів даних (наприклад, JSON, XML, Proto, Parquet, Avro, ORC тощо).
- Досвід взаємодії з платформами: Informatica, Databricks, Talend, Fivetran або подібні.
- Практичний досвід в галузі науки про дані та машинного навчання з побудовою моделей машинного навчання.
ЩО МИ ЗАЛЮБКИ ЗАПРОПОНУЄМО ТОБІ:
- Довгострокова стратегія вашого розвитку як експерта.
- Участь у великих міжнародних проєктах, які дозволяють освоювати нові технології та домени.
- Освітні заходи та професійні тренінги, які допоможуть побудувати стабільний кар’єрний шлях.
- Гнучку систему винагород, де ваш дохід буде залежати тільки від вас і вашого бажання розвиватися.
- Дружню та затишну корпоративну культуру з мінімальним рівнем формальності та бюрократії.
Щоб розпочати успішну кар’єру в NIX, надсилайте своє резюме на адресу jobs@nixsolutions.com. Будемо раді долати нові професійні виклики разом з вами!