Data Engineer

Copy the link to the vacancy
Playrix
Relocate
> 5000 EUR
Experience: > 5 years
Employment: Full-time
Stack: Python, SQL, Linux, Pandas, Apache Spark, Apache Airflow, Tableau
English: А1. Beginner и Elementary

Requirements

- опыт в Data Engineering от 5 лет
- технический бэкграунд в Python от 3 лет: навык проектирования фреймворков и библиотек, - - - умение читать и анализировать код, опыт профилирования и оптимизации производительности/масштабируемости
- навыки работы с популярными DE/ML фреймворками: airflow, pandas, sqlalchemy, tensorflow, mlflow
- навыки написания и оптимизации SQL запросов, умение работать с планами запросов, опыт работы с хранилищами разных архитектур: mpp, columnar, relation, hadoop, in-memory

Tasks

Наш стек

Python — основной язык, доступ к данным — SQL. Datalake построен на S3, Parquet и Hive. В качестве DWH Redshift/PostgreSQL. Работаем в облачной инфраструктуре AWS.

Используем решения мейнстримовых вендоров: Databricks, MonteCarlo, DBT. Практикуем serverless подход работы с ресурсами и горизонтальное масштабирование, используем предиктивные модели. Уделяем внимание рефакторингу и кода, и архитектуры. Для CI/CD процесса используем TeamCity.

Задачи

- подготовка источников данных для заказчика - маркетинг и игровая аналитика
разработка конвейера поставки данных в виде DAG процессов для Airflow
- внедрение моделей прогнозирования и ML в продакшен
- интеграция с сервисами партнеров для получения данных от них
- построение процессов data quality для новых и имеющихся источников

Working conditions

Комфортные условия. Работайте удаленно из любой точки мира. Мы гибко подходим к вопросам релокации и помогаем с переездом

Забота о здоровье. Компенсируем онлайн-сессии с психологом, открываем для вас и ваших детей ДМС со стоматологией и лечением от COVID-19

Забота о благополучии. Сохраняем 100% зарплату во время отпуска или больничного без лишних справок. А для особых случаев предоставим дополнительные выходные

Удобное рабочее место. У нас есть все для комфортной работы, где бы вы не находились. В офисах – зоны отдыха и горячее питание, для удаленных сотрудников — доставка современной техники и компенсация затрат на мебель и оборудование

Спорт и фитнес. Поддерживаем здоровый образ жизни и компенсируем покупку любых спортивных абонементов, подписку на фитнес-приложение или участие в марафонах

Социальные проекты. Запускаем благотворительные проекты и поддерживаем идеи сотрудников в конкурсе грантов

Релокационный пакет. Мы помогаем с переездом сотрудникам, их семьям и домашним животным, а также организуем услуги консьерж-сервиса и риелторского агентства
Created 4 July 2023