#вакансия#DataEngineer
Компания: TN Digital
ЗП: 300-450к на руки + премия
Формат: офис в Москве/гибрид/удаленка
TN Digital отвечает за все цифровые продукты компании «ТЕХНОНИКОЛЬ».
В связи с расширением штата ищем человека в команду разработки EDWH.
Задачи:
-организация пайплайнов потоков данных (конвейера движения данных в компании);
-разработка, поддержка и оптимизация производительности EDWH;
-разработка и настройка ETL/ELT-процессов (сбор, структурирование и обеспечение сохранности данных);
-настройка инфраструктуры для обеспечения качества данных.
Наши ожидания:
-знание современных технологий обработки больших данных;
-хорошее знание Python;
-хорошее знание SQL и реляционных баз данных (желательно, Greenplum или PostgreSQL), опыт написания сложных запросов.
Стек проекта: Python, Greenplum, PostgreSQL, Data Build Tool (DBT), Spark, Kafka, Airflow, Kubernetes, Terraform, Ansible, GitLab, SonarQube, Prometheus, Grafana, AlertManager.
Условия:
-белая зп, оформление по ТК РФ;
-проф обучение за счет компании, ДМС, скидки на занятия спортом, компенсация обучения английского языка, оплата мобильной связи.
Для связи @ryabin_ka
#вакансия#DE#dataengineer
❇️ Data инженер ❇️| Компания Top Selection
🔥 Мы в поиске Data инженера на проектную занятость
Грейд: Senior
Ставка: от 350-420К
Гражданство/Локация: строго РФ
Загрузка: фуллтайм
Срок: долгосрочный
Оформление: только ИП 📌
✅Обязательные требования:
- Владение SQL на уровне оптимизированных сложных запросов;
- Понимание принципов функционирования традиционных СУБД и баз данных класса MPP;
- Опыт программирования на языках Python и/или Java, Scala;
- Опыт оркестрации ETL-пайплайнов с помощью Airflow;
- Наличие опыта взаимодействия с инструментом dbt;
- Умение работать с технологиями экосистемы Hadoop (HDFS, YARN, HIVE, Sqoop);
- Владение технологией Apache Spark (Spark DataFrames, Spark SQL);
- Опыт работы с банковской предметной областью.
🔍Доп.требования
- Опыт работы с Kafka, Trino;
- Опыт работы с контейнерными технологиями и оркестрацией: kubernetes, helm;
- Знания и опыт CI/CD-практик и инструментов.
📌 Текущий основной стек:
Python, Trino, dbt, Airflow, Spark, Hadoop, Hive, Postgres, Greenplum, Kubernetes, Gitlab.
По всем вопросам и с резюме пишите: @aliiS_a
#вакансия#DataEngineer#DataAnalyst
Data Engineer / Data Analyst
✅Компания "Neoflex"
создает ИТ-платформы для цифровой трансформации бизнеса;
являемся аккредитованной IT компанией.
Вилка зп: От 200.000 до 345.000 руб.;
Локация: Гибрид/офис (Москва, Санкт-Петербург, Нижний Новгород, Воронеж, Пенза, Саратов, Самара, Краснодар) или полная удалёнка с территории РФ;
Занятость: Полная 5/2;
Условия: Оформление по ТК РФ;
Вам предстоит:
• Участие в проекте по разработке DWH в Greenplum по методологии Data Vault;
• Взаимодействие с бизнес-подразделениями и ИТ-командами для определения потребностей использования данных хранилища, с целью развития модели хранилища;
• Проектирование и описание модели данных детальных слоев корпоративного хранилища;
• Разработка стандартов проектирования детальных слоев хранилища, загрузки, хранения и доступа к данным, контроль за соблюдением стандартов;
• Анализ и декомпозиция задач в сложных проектах по развитию хранилища, оценка трудозатрат, сроков и рисков. Проработка концептов загрузки данных в хранилище;
• Согласование алгоритмов и маппингов, подготовленных командами, обеспечивающими загрузку данных в хранилище;
• Контроль целостности и консистентности модели, контроль качества функционала загрузки данных в хранилища. Участие в приемо-сдаточных испытаниях;
• Анализ и выявление корневых причин возникновения ошибок, разработка концепций и мероприятий по их устранению;
• Экспертная поддержка бизнес-пользователей, потребителей данных, аналитиков и разработчиков ИТ команд, обеспечивающих загрузку данных. Консультирование по ассортименту данных в хранилище и особенностям использования данных.
Мы ожидаем что у Вас есть:
• Уверенное знание SQL и опыт работы с СУБД (PostgreSQL, GreenPlum);
• Опыт проектирования логических и физических моделей хранилищ данных (Data Vault) или участие в проектах по автоматизации отчетности на базе хранилища данных;
• Знание архитектуры хранилища данных и методов моделирования данных;
• Опыт работы с ETL - оркестратором (Airflow);
• Знание основ банковского бухгалтерского учета (будет плюсом);
• Опыт работы c гибкими проектными методологиями (agile, scrum, kanban).
Мы предлагаем:
• Работа в аккредитованной IT компании;
• Официальное трудоустройство по ТК РФ;
• Амбициозные задачи и проекты;
• Неограниченные возможности профессионального и карьерного роста;
• Работа в команде профессионалов и просто хороших людей, которые всегда готовы помочь и поддержать;
• Подключение к программе ДМС (включает стоматологию, обследования, лечение заболеваний и т.д.);
• Предоставление корпоративной техники;
• Корпоративное обучение и развитие (портал обучения и развития с удаленным доступом 24/7; собственный Центр развития компетенций);
• Оплата внешнего обучения и профильных курсов;
• Насыщенная корпоративная жизнь: яркие корпоративы, праздники для детей сотрудников, спортивные мероприятия и т.д.
Telegram @Liubov_Neoflex (Любовь)
#Dataengineer#вакансия#middle#Москва
Всем добрый день!
Вакансия: Data engineer
Компания: Инновационный центр "Безопасный Транспорт" Big Data подразделение внутри Департамента Транспорта Москвы
Формат работы: гибрид (1 день из офиса)
Адрес офиса: Москва, м Белорусская (кольцевая)
Уровень заработной платы: до 250 000 руб. на руки
О компании:
Инновационный центр "Безопасный Транспорт" —ключевой источник и поставщикBigData для всего Транспортного комплекса города Москвы, разрабатывает цифровые продукты, оказывающие влияние на транспортную безопасность дорог Москвы.
Мы гарантируем будущему коллеге:
• Оформление по ТК с первого рабочего дня;
• Гибридный формат (1 день из офиса на Белорусской);
• Белая заработная плата, обсуждается индивидуально, в зависимости от опыта кандидата (до 250 на руки);
• Отпуск 42 дня;
• Бесплатный проезд в метро;
• Полугодовое ревью, по итогам которого можно повысить уровень дохода или роль в команде.
Чем предстоит заниматься:
• Поддержка работоспособности и дальнейшее развитие платформы данных;
• Интеграция Х Д с различными источниками (FTP, API, сайты) с помощью Python;
• Преобразование данных из различных форматов (xml, json) к табличному виду с помощью Python;
• Разработка витрин данных с использованием SQL, Python, PySpark;
• Разработка и доработка batch и real-time процессов загрузки данных в различные слои ХД в Hive, Vertica, PostgreSQL, ClickHouse, DB2;
• Развитие системы мониторинга качества данных;
• Совершенствование и разработка новых внутренних процессов команды;
• Декомпозиция и оценка трудозатрат по своим задачам;
• Code-review;
• Поддержка в актуальном состоянии базы знаний и технической документации ХД.
Мы ожидаем от кандидата:
• Законченное высшее образование!
• Наш стэк: Apache Spark, Spark streaming, Kafka, Apache Hive, Airflow, Linux, Git, Bash, Vertica, Grafana+Zabbix, PostgreSql, ClickHouse, DB2
• Понимание теории и практики построения Хранилищ Данных на уровне data-инженера;
• Уверенное владение SQL, опыт написания сложных запросов с подзапросами, оконными функциями и регулярными выражениями, навыки оптимизации запросов;
• Уверенные навыки программирования, умение читать и понимать код на Python;
• Понимание принципов работы Git-систем и систем оркестрации;
• Заинтересованность в личном развитии и развитии города.
Контакт: @ElinaPankratova
#вакансия#vacancy#dataengineer#middle#удаленно
🦋Компания: Twinby
☀️Позиция: Data Engineer (Middle)
💸Вилка: 200к-280к рублей net
📍Формат работы: полная занятость, удаленный формат
Всем привет!
Меня зовут Полина, Recruitment Lead в Twinby ☀️
🦋TWINBY — сервис для проверки совместимости и поиска новых знакомств. Наша цель – стать дейтинг-приложением №1 в России, заменив сам-знаешь-что. У нас это отлично получается: сейчас Twinby скачали уже более 14 миллионов пользователей.
Мы строим надёжную платформу: ingestion → DWH/витрины → BI/аналитика → продуктовые решения. Сейчас мы в поиске Data Engineer'а, который усилит пайплайны, качество данных и производительность хранилища.
Наш стек: Python, ClickHouse, CockroachDB, DataLens, JupyterLab / DataSphere, GitLab, Airflow, AppMetrica / Метрика / GA.
Функции в команде:
- Разрабатывать и поддерживать ETL/ELT-пайплайны в Airflow;
- Проектировать слой данных в ClickHouse: схемы, партиционирование, сортировка, движки (MergeTree-семейство), дедупликация, оптимизация запросов;
- Строить витрины/слои для BI (DataLens) и аналитиков;
- Обеспечивать качество данных: проверки, алерты, контроль свежести/полноты, разбор инцидентов.
Наши ожидания:
- Опыт в data engineering от 2–4 лет;
- Уверенный Python для ETL: работа с API, обработка данных, аккуратная архитектура кода;
- Практический опыт работы с оркестраторами (у нас Airflow): планирование, мониторинг, инциденты, backfill;
- Опыт работы с аналитическими хранилищами (у нас ClickHouse) и понимание его особенностей (partitions/order key, merges, TTL, FINAL, dictionaries/матвью);
- Опыт построения DWH/мартов и слоёв (stg/core/mart), data catalog/lineage;
- Отличный SQL и опыт оптимизации запросов/моделей.
Будет плюсом:
- Углублённое понимание реляционных СУБД и внутренностей: индексы, планы выполнения, нормализация/денормализация, оптимизация запросов;
- Опыт диагностики и решения performance-проблем (у нас есть CockroachDB).
Мы предлагаем:
- Full-time работа с полностью удаленным форматом;
- Официальное оформление по трудовому договору в РФ;
- Конкурентную заработную плату;
- Корпоративные скидки для сотрудников;
- Возможность профессионального развития и карьерного роста.
🦋Контакт для связи:@pppanini (тг)
#вакансия#dataengineer#remote#fulltime#senior
💼 Международная технологическая компания с более чем 15-летним опытом работы в области обработки данных и искусственного интеллекта, специализирующаяся на аутстаффинге и техническом консалтинге в поисках Senior Data Engineer на крупный проект для энергетической компании из Германии.
👨💻 Какой опыт ожидаем увидеть:
* От 5 лет опыта работы
* Опыт проектирования хранилищ данных и архитектуры данных
* Уверенное владение SQL: написание и оптимизация сложных запросов, работа с большими объёмами данных
* Практический опыт применения методологии Data Vault 2.0
* Владение Python для автоматизации ETL/ELT, обработки и анализа данных
* Опыт с современным стеком: Snowflake (настройка, безопасность, оптимизация), dbt (Core), Apache Airflow (оркестрация пайплайнов)
* Знакомство с Azure DevOps (CI/CD, управление задачами, версионирование)
* Английский — не ниже B2
Что предлагает компания?
* Формат сотрудничества: B2B-договор.
* Полностью удалённая работа из любой точки мира, кроме России, Беларуси и Украины. Доступность в рамках часового пояса CET (до 18:00 CET)
* Рaid bench time.
* Возможность участвовать во внутренних проектах для поддержания загрузки между клиентскими проектами.
* Оплачиваемый больничный.
* Компенсация стоимости сертификаций и обучения.
* Доступ к передовым проектам в области AI и Data.
Вилка: до 5000 usd gross
Формат работы: remote
Занятость: Full Time
📩 Хотите узнать больше?
Напишите мне в тг @veronikavlasovets
#Вакансия#DataEngineer#Senior#УдаленнаяРабота
Senior Data Engineer в Welltory
Welltory — приложение для здоровья с 10 млн пользователей и 180 тыс. оценок ★★★★★. Создаём новую команду Data Engineering: будем строить Data Lakehouse со всеми данными в компании и доставлять данные для фичей нашего мобильного приложения.
Требования:
— Опыт работы 5+ лет в Data Engineering.
— Владение: Python, Apache Spark, AWS, SQL и NoSQL базами данных.
— Понимание теории Data Engineering и трендов в отрасли.
— Большим плюсом будет продакшен опыт с Apache Iceberg.
— Умение адаптироваться к новым инструментам, включая последние AI-решения.
Задачи:
— Построение и поддержка внутреннего Data Lakehouse на AWS.
— Разработка пайплайнов для обработки данных.
— Участие в создании архитектуры и настройке процессов в новой команде.
Условия:
— Удаленная работа с гибким графиком.
— Бонусы: субсидии на технику (50%), корпоративный психолог, опционная программа.
— Возможность влиять на здоровье и благополучие миллионов пользователей.
Контакты для связи: @welltoryhr
#Вакансия#DataEngineer#Senior#УдаленнаяРабота
Senior Data Engineer в Welltory
Welltory — приложение для здоровья с 10 млн пользователей и 180 тыс. оценок ★★★★★. Создаём новую команду Data Engineering: будем строить Data Lakehouse со всеми данными в компании и доставлять данные для фичей нашего мобильного приложения.
Требования:
— Опыт работы 5+ лет в Data Engineering.
— Владение: Python, Apache Spark, AWS, SQL и NoSQL базами данных.
— Понимание теории Data Engineering и трендов в отрасли.
— Большим плюсом будет продакшен опыт с Apache Iceberg.
— Умение адаптироваться к новым инструментам, включая последние AI-решения.
Задачи:
— Построение и поддержка внутреннего Data Lakehouse на AWS.
— Разработка пайплайнов для обработки данных.
— Участие в создании архитектуры и настройке процессов в новой команде.
Условия:
— Удаленная работа с гибким графиком.
— Бонусы: субсидии на технику (50%), корпоративный психолог, опционная программа.
— Возможность влиять на здоровье и благополучие миллионов пользователей.
Контакты для связи:
• Костя, руководитель команды: @tyapochkinks
• Или пишите нам в HR: @welltoryhr
#вакансия#vacancy#job#middle#dataengineer
Data Engineer в Selectel
Санкт-Петербург, Москва (гибкий гибрид)
Меня зовут Полина, я рекрутер в Selectel.
Мы — продуктовая IT-компания, предоставляем клиентам инфраструктурные решения: свое облако, платформенные сервисы в облаке, а также выделенные серверы — у нас 6 собственных дата-центров.
Основные задачи
- Взаимодействие с владельцами данных по вопросам сбора и качества данных, проведение системного анализа источников
- Разработка и поддержка пайплайнов загрузки данных на Python с использованием DAG’ов Airflow
- Разработка dbt-моделей по ключевым бизнес-процессам по схеме «звезда», создание витрин данных
- Автоматизация процессов, настройка CI/CD пайплайнов, мониторинга и алёртинга
- Участие в развитии процессов Data Quality, Data Catalog и Data Lineage, а также инфраструктуры платформы данных
- Взаимодействие с BI разработчиками и аналитиками
Мы ожидаем
- Опыт работы с реляционными (PostgreSQL) и аналитическими (ClickHouse) базами данных
- Опыт разработки на Python, особенно в сфере написания ELT пайплайнов и разработки DAG’ов Airflow
- Уверенное знание SQL и опыт оптимизации запросов
- Понимание принципов построения DWH
- Базовые знания Linux, Docker, Git, CI/CD
Если стало интересно, буду рада с вами пообщаться в лс: @apolinque
#вакансия#vacancy#fulltime#dataengineer#data
▫️Data engineer в крупную производственную компанию
▫️Оплата: от 160.000 на руки
▫️Требуемый опыт работы: от 1 года
▫️Занятость: Полная занятость, полный день
▫️Формат: гибрид
▫️Локация: Санкт-Петербург
▫️Основные задачи:
- Управление ETL-процессами;
- Очистка информации от лишних дублей, устранение ошибок;
- Проектирование и разработка пайплайнов (ETL-процессов).
- Поддержка существующих баз данных;
- Написание функций и хранимых процедур для преобразования и агрегации данных, создание витрин;
- Анализ существующих SQL запросов с целью их оптимизации;
- Обновление и поддержка используемых инструментов и приложений;
- Подготовка данных для анализа;
- Помощь в подготовке дэшбордов и анализе данных.
▫️Ожидание от кандидата:
- Опыт работы с системами: PostgreSQL, ClickHouse, MS SQL, Arenadata;
- Владение SQL (PostgreSQL/ClickHouse), Python (Pandas, Numpy, SQLAlchemy);
- Умение организовывать ETL-процессы, опыт разработки пайплайнов в NiFi;
- Английский язык на уровне чтения технической документации.
▫️Что готовы предложить:
- Гибридный формат работы;
- Добровольное медицинское страхование и страхование жизни от несчастных случаев;
- Льготное питание;
- Профессиональное развитие и обучение;
- Корпоративные занятия спортом.
- Уровень заработной платы обсуждается с финальными кандидатами.
Контакт: @polina_albova
#vacancy#dataengineer#de#python
Вакансия: Senior Data Engineer
Формат: офис/гибрид (Ереван), удалённый
Локация: любая
Занятость: полная
Оплата: до 350 000 рублей
Обязанности:
- Проектирование и реализация систем для сбора и обработки данных.
- Трансформация бизнес-требований в модели данных.
- Обеспечение поддержки бизнес-требований через архитектуру данных.
- Обеспечение безопасности данных.
Требования:
- 4+ лет опыта работы в области инженерии данных, ETL-процессов и управления сложными решениями по хранению данных
- Подтвержденный коммерческий опыт создания и развертывания приложений с использованием Python и Apache Airflow
- Практический опыт работы с облачной инфраструктурой AWS и управлением решениями для хранения и передачи данных в облачной среде
- Продвинутое владение SQL (особенно PostgreSQL) и глубокое понимание различных решений по хранению данных, включая структурированные и неструктурированные данные
- Желание изучать и экспериментировать с агентами ИИ совместно с командой Data Science, интегрировать ИИ-логику в архитектуру конвейеров данных
- Отличные навыки решения проблем, способность справляться с неопределенностью и предлагать решения в сложных ситуациях
- Уровень английского B2 или выше
Технологии и языки:
- Python
- SQL
- Облачная платформа AWS
- Git
- Pandas
- Airflow
- CI/CD, Jenkins
Предпочтительно:
- Опыт работы с векторными хранилищами и графовыми базами данных
- Опыт работы с облачными платформами машинного обучения
- Знание эффективных форматов данных (например, Parquet, Avro) для пакетной обработки в озерах данных или хранилищах данных, опыт работы с Apache Spark
- Snowflake Data Warehouse
- Docker
- Linux + bash, ssh
- Jupyter
- Параллельные вычисления
Будет плюсом:
- Опыт работы с командами Data Science
- Сертификация AWS
Мы предлагаем:
- Работу в динамичной международной команде
- Возможность сотрудничества через ИП/самозанятость для коллег, находящихся за пределами РФ
- Участие в иностранных и российских проектах
- Оформление по ТК РФ, 100% оплата больничного и отпуска
- ДМС со стоматологией
- Необходимую для работы технику
- Корпоративные обучающие программы
- Широкие возможности для самореализации, профессионального и карьерного роста
- Демократичный подход к процессам и плавающее начало рабочего дня
- Опцию перемещения между нашими зарубежными офисами
По всем вопросам и с резюме: @ananyancat
#вакансия#ГородМосква#удаленнаяработа#DataEngineer
🔆Должность - Data Engineer, Middle и выше
🔶Компания - Арт-Финтех
⌨️Требования к кандидату:
- Гражданство и локация РФ
- Опыт проектирования потоков загрузки данных в хранилища DWH, опыт работы с
промышленными ETL (Informatica PowerCenter как плюс);
- Опыт работы с хранилищами данных (Oracle);
- Понимание финансовых инструментов и особенности их учета по РСБУ как плюс;
- Опыт работы на проектах внедрения/развития хранилищ данных от 3-х лет
✅Чем предстоит заниматься?
- Разработка нового и доработка существующего функционала в КХД;
- Автоматизация алгоритмов расчета трансфертного результата по операциям на
финансовых рынках.
- Загрузка и обработка данных для расчета финансового результата по финансовым инструментам.
🔗Условия:
Full-time, 5/2.
💵Вилка до 320к рублей на руки.
🪩Немного о нас:
Группа компаний «Арт-Финтех» более 20 лет на рынке — международный поставщик инновационных банковских программных решений. Наша компания разрабатывает ПО для финансового сектора
🖋@Oleghols