Middle Data Engineer
Employment Information
Report this job
Job expired or something wrong with this job?
Job Description
Data Engineer owning analytics infrastructure for Boosters’ JustDone AI research assistant. Building reliable event, ETL/ELT, BigQuery, Airflow, and Milvus pipelines.
Responsibilities:
- Взяти ownership за аналітичну data-інфраструктуру JustDone, забезпечувати її стабільну роботу та знаходити можливості для оптимізації й розвитку
- Підтримувати та розвивати event pipelines від RabbitMQ до DWH і Amplitude / Reteno
- Підключати нові та підтримувати наявні джерела даних, розвивати ETL / ELT pipelines
- Відповідати за BigQuery та Airflow, керувати доступами й service accounts, підтримувати порядок у data streams і schemas
- Розвивати архітектуру Bronze → Silver → Gold
- Працювати з partitioning, clustering і materialized views, оптимізувати схеми та запити
- Налаштовувати перевірки актуальності й повноти даних, моніторинг SLA та anomaly alerts
- Досліджувати інциденти та знаходити їхні першопричини
- Розвивати пайплайни завантаження й оновлення даних у Milvus, працювати з індексами та lifecycle даних для NLP-систем
- Долучатися до суміжних NLP-задач і працювати пліч-о-пліч із Data Engineering командою
Requirements:
- 2+ роки комерційного досвіду на позиції Data Engineer
- Впевнене володіння Python для розробки ETL/ELT-процесів, consumers та integrations і написання підтримуваного production code
- Сильний SQL: складні запити, window functions, оптимізація та робота з великими датасетами
- Досвід роботи з DWH та Data Modeling: структурування даних, incremental loads, побудова й підтримка production pipelines
- Досвід із хмарними data-платформами — GCP або аналогічними рішеннями
- Розуміння оркестрації та event-driven pipelines: Airflow, Prefect, Dagster, Kafka, RabbitMQ, Pub/Sub або аналоги
- Розуміння Data Quality та Observability: моніторинг, контроль якості даних, alerts і troubleshooting
- Досвід роботи з Vector DB (Milvus, Pinecone, Weaviate, Qdrant) буде перевагою
- Ownership і самостійність
- Комунікація та командна взаємодія
- Продуктове мислення
Benefits:
- Планові performance review і розробка PDP
- Підтримка в розвитку персонального бренду в соцмережах Boosters і експертних медіа
- Профільні комʼюніті з безкоштовними курсами і можливістю нетворкінгу
- Бюджет на курси, конференції та вивчення англійської
- Техніка від компанії та оплата всіх необхідних сервісів для роботи
- Можливість обирати між роботою в офісі (Київ або Львів) та remote-first форматом (Україна та закордон)
- Гнучкий старт дня (з 8 до 11 ранку за Києвом)
- 20 дей-офів на рік, вихідні на державні свята та безлімітні лікарняні
- Медичне страхування
- Компенсація роботи з психологом
- Індивідуальний бенефіт на заняття спортом
- Сніданки й обіди (on-site в офісах)
- Спортивні активності: спільнота для бігу, волейбол, йога (офлайн); стретчинг та йога (онлайн)
Similar Jobs
Senior Data Engineer – Square, APAC
Senior Data Engineer building scalable data pipelines and feature platforms for Binance’s global cryptocurrency ecosystem. Supporting machine learning and recommendation systems across APAC.
Senior FHIR Data Platform Engineer
Senior engineer optimizing HAPI FHIR and PostgreSQL platforms for federal healthcare modernization. Delivering quality reporting, MDM, performance, and reliable data exchange.
Data Engineer – Level III
Data Architect / Engineering Lead guiding AWS modernization, enterprise data platforms, and AI/ML enablement. Supporting AttainX’s federal NRCS technology programs under the USDA OMNI contract.
Staff Data Engineer – Databricks
Staff Data Engineer designing scalable Azure and Databricks data platforms for CVS Health’s connected healthcare services. Leading architecture, pipeline optimization, data quality, and engineering mentorship.
Short-Term Membership Data Migration Consultant
Remote consultant migrating Together for Girls’ contact data from Airtable into EveryAction CRM. Cleansing, mapping, validating and documenting sensitive records for advocacy, fundraising and reporting.
Data Engineer
Senior Data Engineer designing scalable data pipelines and high-value products. Bridging data architecture with business applications in Study Patient projects.
Data Architect
Data Architect designing scalable data models, ETL pipelines, and SQL Server environments. Supporting Corpay’s global commercial payments solutions through migrations, warehousing, and data governance.
Senior Data Engineer – Cybersecurity
Senior Data Engineer modernizing Snowflake, DBT, SQL, and Python data infrastructure. Improving pipelines and security analytics for a global cybersecurity company.
Data Engineer – Databricks, PySpark
Data Engineer building Databricks and PySpark lakehouse solutions for Sigma Software’s AdTech analytics client. Developing scalable batch and near-real-time marketing data pipelines.
Data Engineer II – Data Platform
Data Engineer II building scalable AWS, Snowflake, and dbt data platforms for First Citizens Bank. Developing reliable pipelines, data quality controls, and analytics solutions.
Senior Data Engineer, Developer
Senior Data Engineer owning Azure data pipelines, integrations, and backend development. Supporting Smart Working’s global teams with financial analysis, automation, and business visibility.
Data Platform Engineer – Clearance Required
Data Platform Engineer building Palantir Foundry, Databricks, and Power Platform solutions for LMI’s Army and federal government clients. Leading data pipelines, AI/ML integration, and technical mentorship.
CRM/Data Platform Consultant
iGaming CRM consultant shaping an advanced player data platform for a MarTech company. Advising on strategy, architecture, vendor selection, retention, and multi-brand data.
Senior Data Engineer
Data Engineer building scalable data products and pipelines for SOFTSWISS’s enterprise analytics platform. Working with Spark, Kafka, Delta Lake, and modern data infrastructure.
Senior Data Engineer
Senior Data Engineer improving Snowflake, dbt, SQL, and Python data platforms. Enhancing reliable financial and healthcare technology solutions at Kodiak Solutions.
Staff Data Engineer
Staff Data Engineer improving Snowflake and dbt reliability, performance, and standards. Modernizing data platforms for Kodiak Solutions’ healthcare finance and revenue-cycle products.
Data Engineer, SAS
SAS/Data Engineer modernising SAS processes and migrating them to Databricks/Fabric. Bridge351 delivers cloud, cybersecurity, data, and advanced development solutions across Europe.
Senior Data Engineer
Senior Data Engineer modernizing data processes and pipelines for a cybersecurity solution protecting applications from automated attacks. Driving reliability, scalability, and architectural improvements.
Senior Data Scientist, Data Engineering Expert
Senior data scientists and engineers designing evaluation tasks and training frontier AI models. Remote contract work with Mercor and leading AI research labs.
Senior SAP S/4HANA Data Migration Analyst
Senior SAP S/4HANA migration analyst executing enterprise data migrations for TE Connectivity, a global industrial technology and connectivity solutions leader.