Senior Data Engineer (Google Cloud Platform)
Про продукт
Інтро
Ми шукаємо Senior Data Engineer із сильною експертизою в Google Cloud Platform до централізованої Data & AI команди глобальної організації, що працює через кілька бізнес-підрозділів і операційних компаній. Компанія розвиває масштабовану основу data engineering — стандартизовані пайплайни, data products і спільну інфраструктуру — для управління корпоративними даними, автоматизації процесів, розширеної аналітики та майбутніх AI-ініціатив.
Наявна інфраструктура даних побудована переважно на GCP, де BigQuery виступає центральним data lake та аналітичною платформою. Довгострокова мета — створити внутрішню AI Factory, яка надаватиме повторно використовувані дата- та AI-рішення для всієї організації.
Це hands-on інженерна роль, а не бізнес-аналіз чи data science. Залучення передбачає full-time роботу протягом тривалого періоду (12+ місяців), очікуваний старт — середина січня 2027 року.
Стек технологій
Python
advanced SQL
Google BigQuery
Google Cloud Dataflow
Google Cloud Composer
Google Dataform
Google Cloud Pub/Sub
Apache Kafka
Change Data Capture
ETL
Твоя команда
Ти приєднаєшся до сформованої функції data engineering у складі централізованої Data & AI команди. Тісно працюватимеш із Principal Data Architect, який ознайомить тебе з наявною архітектурою, а також з іншими data-інженерами та бізнес-орієнтованими AI-спеціалістами. У міру зростання попиту в операційних компаніях команда може розширюватися.
Культура
Ми впроваджуємо високі стандарти в технологічну індустрію – це є місією нашої роботи. Щоб відповідати цьому, Techstack та всі мембери завжди рухаються вперед.
Кожен із нас має можливість зробити власний внесок у продукт, компанію, команду, галузь та свій особистий розвиток. Також у Techstack ти можеш вибрати цікавий для тебе формат розвитку:
- мітапи, на яких ти можеш ділитися своїми знаннями і одночасно розвиватись, завдяки поширенню власного досвіду в межах компанії та місцевих технічних спільнот;
- ролі ментора чи технічного ліда. Займаючи одну з цих ролей, ти будеш допомагати молодшим спеціалістам та ділитися з ними своїми знаннями та досвідом;
- участь у наших технічних гільдіях, де можна обговорювати технічні рішення, підходи та тренди індустрії.
Це все й формує нашу технічну культуру і експертизу компанії.
Твої обов’язки
Проєктувати, реалізовувати та підтримувати масштабовані пайплайни інгестії й трансформації даних
Розробляти повторно використовувані патерни та компоненти пайплайнів для різних бізнес-підрозділів
Підтримувати batch, micro-batch та streaming обробку даних
Будувати надійну інгестію даних із корпоративних систем і зовнішніх джерел
Реалізовувати очищення, трансформацію та дедуплікацію даних
Розробляти й підтримувати рішення на BigQuery, Dataflow, Composer та Dataform
Реалізовувати або підтримувати CDC-пайплайни для реляційних баз даних і транзакційних систем
Створювати кастомні компоненти обробки даних, коли керованих сервісів недостатньо
Оптимізувати пайплайни за продуктивністю, надійністю та підтримуваністю; розв'язувати збої й проблеми обробки даних
Підтримувати створення надійних датасетів і data products для аналітики, бізнес-застосунків та AI-рішень
Співпрацювати з Principal Data Architect у впровадженні архітектурних стандартів і вдосконаленні наявних інженерних патернів
Працювати з командами операційних компаній, коли потрібна централізована інженерна підтримка
Це про тебе
Сильний практичний досвід проєктування та реалізації data engineering рішень на Google Cloud Platform
Практичний досвід із BigQuery та Dataflow
Досвід оркестрації workflow, бажано Cloud Composer
Досвід із SQL-фреймворками трансформації, бажано Dataform
Сильні навички Python та advanced SQL
Досвід побудови production-grade ETL/ELT-пайплайнів і повторно використовуваних компонентів інгестії та трансформації даних
Знання практик забезпечення якості, очищення, дедуплікації та трансформації даних
Розуміння хмарних архітектур data lake та корпоративних дата-платформ
Досвід batch та near-real-time обробки; розуміння event-driven архітектур
Знайомство з Pub/Sub або Kafka; знання підходів CDC для SQL-баз даних
Досвід інтеграції даних із різнорідних корпоративних систем
Здатність працювати самостійно в усталеному інженерному середовищі та дотримуватися архітектурних стандартів
Вміння документувати технічні рішення й обговорювати інженерні компроміси
Гарна розмовна та письмова англійська для щоденного спілкування з клієнтом
Часовий пояс: бажано CET; перетин із US Eastern time буде перевагою
Буде плюсом:
Досвід із managed Kafka-сервісами
Досвід реалізації CDC-пайплайнів у продакшені
Знайомство з Google Cloud Workflows
Досвід проєктування data products для AI/ML-застосунків
Досвід роботи в корпоративних середовищах із кількома операційними компаніями чи бізнес-підрозділами
Досвід підтримки спільних платформ data engineering
Знайомство з автоматизацією інфраструктури, CI/CD та моніторингом дата-пайплайнів
Досвід участі в enterprise AI чи advanced analytics ініціативах
Що у нас є для тебе
Довгострокове залучення (12+ місяців) на стратегічній ініціативі: побудова дата-основи enterprise AI Factory
Робота із сучасним GCP-стеком та досвідченим архітектором з боку клієнта
Можливості для професійного та кар'єрного зростання завдяки складним завданням, мітапам, хакатонам і професійним спільнотам
Горизонтальні зв'язки та відсутність мікроменеджменту: всі тімейти доступні один для одного
Хаби у Харкові, Києві, Львові та Вроцлаві (Польща) або все необхідне для ремоут-роботи
До 50% компенсації вартості освітніх курсів та конференцій
Безкоштовні курси англійської мови та бізнес-англійської
20 днів відпустки та 7 лікарняних днів
Юридичний та бухгалтерський супровід
Подарунки до важливих подій та свят
Етапи приєднання до Techstack
Попередній скринінг із Talent Acquisition спеціалістом
Перевірка англійської мови
Технічний скринінг та оцінка з інженерами Techstack
Інтерв'ю з клієнтом (можливе друге інтерв'ю)
Про нас
Techstack — це компанія з інжинірингу технологічних продуктів, що привносить високі стандарти розробки в ІТ-індустрії та підтримує їх. Ми надаємо можливість кожному члену команди впливати на розвиток продукту, компанії та процесів.
Дізнайся ще більше про Techstack
Хочеш зробити свій внесок?
Ти у правильному місці.
