Мы ищем технически сильного и внимательного к деталям инженера по данным для проектирования и масштабирования нашей инфраструктуры данных. Эта роль требует человека, который обеспечит техническую надежность данных.
Наш стек
- Хранилище: BigQuery
- Получение данных: Airbyte (самостоятельно размещенный), настраиваемый Python
- Преобразование: Dataform, SQL, Python
- Оркестрация: Cloud Run / Cloud Functions, Airbyte
- Инфраструктура: GCP, Terraform
- Хранение: Cloud Storage
- Визуализация: Looker Studio
Основные обязанности:
- Проектирование, создание и обслуживание масштабируемых конвейеров данных и рабочих процессов ETL/ELT (Python, SQL)
- Разработка и оптимизация моделей данных в BigQuery
- Обеспечение надежности, производительности и качества данных во всем хранилище Интеграция данных
- Интеграция источников данных по маркетингу и электронной коммерции (Google Ads, Meta Ads, GA4, Shopify и т. д.) с помощью API и инструментов для сбора данных
- Обслуживание и улучшение процессов сбора данных (Airbyte и пользовательские решения)
- Развертывание и управление сервисами в GCP (Cloud Run / Cloud Functions).
- Управление инфраструктурой с помощью Terraform или аналогичных инструментов IaC
- Мониторинг работоспособности конвейера и устранение сбоев
- Поддержка сложных потребностей в отчетности и обслуживание расширенных панелей мониторинга в Looker Studio
- Сотрудничество с аналитическими командами для обеспечения пригодности данных к использованию и их надлежащей документации
Требования:
- Обязательно 2-3 года опыта в области инженерии данных или разработки бэкэнда с упором на аналитику/платформы данных
- Отличные навыки работы с Python для данных конвейеров, автоматизации и интеграции API
- Отличные навыки работы с SQL (сложные запросы, моделирование данных, оптимизация производительности; предпочтительно BigQuery)
- Опыт интеграции внешних сервисов через REST API / SDK
- Практический опыт работы с ETL/ELT-процессами
- Практический опыт работы с BigQuery, Cloud Storage (или аналогичными облачными сервисами)
- Свободное владение письменным и устным английским языком (минимум уровень B2)