Data инженер (интеграционные среды) Senior, финтех
Сигналы объявления: 1 из 3
Это счётчик доступных сигналов, а не рейтинг безопасности работодателя. Нет данных по 2 из 3 проверок.
- Источник «Работа России»: нет данных — Нет подтверждённых данных об этом объявлении на государственной площадке.
- Проверка hh.ru: нет данных — Подтверждённый флаг employer.trusted от hh.ru не получен.
- Свежесть публикации: есть сигнал — С даты публикации прошло 4 дн. Порог сигнала — 30 дней; обновление даты не доказывает наличие свободного места.
Сопоставьте ИНН, юридическое название и условия договора. Даже свежая вакансия проверенной площадки требует проверки перед откликом.
Как проверить работодателя →✍ Составить сопроводительное письмо
Письмо хранится только в вашем браузере. Проверьте название компании перед отправкой — чужое имя в письме читается как массовая рассылка.
Опыт и подпись возьмутся из вашего мини-резюме.
💰 Сколько зарабатывают на этой позиции
Пожаловаться на подозрительную вакансию
Опишите конкретные признаки обмана. Не указывайте паспортные данные, номера карт или чужие контакты. После трёх учтённых жалоб объявление скрывается до проверки; это не доказательство мошенничества.
Чем предстоит заниматься:
- Развивать интеграционную среду: подключать метаданные информационных систем к Единому интеграционному слою и витрине DMDC.
- Создавать шаблоны в платформе управления метаданными для подключения ключевых типов СУБД: PostgreSQL, Oracle, MS SQL, ClickHouse, DB2, Elasticsearch, Tarantool.
- Проектировать и разрабатывать Python-скрипты для автоматической генерации DDL/DML-запросов.
- Разрабатывать и поддерживать Airflow DAG для процессов загрузки и обслуживания данных.
- Исправлять ошибки существующих потоков и повышать их надежность.
- Разрабатывать Airflow DAG для обслуживания таблиц Iceberg, в том числе с использованием кастомных операторов для оптимизации чтения при большом количестве delete-файлов.
- Дорабатывать функциональность витрины DMDC для полной поддержки возможностей каталога данных.
- Дорабатывать функциональность витрины DMDC для полной поддержки возможностей каталога данных.
Для нас важно:
- Глубокая экспертиза в разработке на PySpark и написании сценариев Airflow.
- Опыт работы с высоконагруженными распределенными системами обработки и хранения данных (Hadoop).
- Практические навыки конфигурации и оптимизации Spark-приложений, управления ресурсами Spark.
- Опыт работы со стеком Streaming/Storage/Messaging: Spark Streaming, Iceberg, Kafka, S3.
- Навыки работы с контейнеризацией и оркестрацией в Kubernetes.
- Опыт проведения нагрузочного тестирования систем обработки данных.
- Экспертное владение SQL и навыки оптимизации сложных запросов.
- Понимание основ математической статистики, анализа данных и машинного обучения (PyTorch, TensorFlow).
- Умение работать с распределенными системами и обеспечивать консистентность данных при автоматическом определении типов схем.
Главный принцип SkillStaff - Выбирай!
- РАЗНООБРАЗИЕ ПРОЕКТОВ. Выбирай из сотен компаний и проектов то, что интересно и полезно для твоего роста. SkillStaff помогает реализовывать ежегодно порядка 500 различных ИТ-проектов для крупного бизнеса.
- КОМФОРТ. SkillStaff — аккредитованная IT-компания, белая зарплата и удобный график работы. Создавай идеальные условия для своей работы: удаленная работа или возможность работать как в офисе клиента, так и в комфортном офисе SkillStaff в центре Москвы на Воздвиженке.
- РАЗВИТИЕ. Выбирай сам путь, по которому ты хочешь развиваться. Используй возможность обмена опытом и получение знаний через участие в разных проектах, совместную работу с высококвалифицированными коллегами.
- КУЛЬТУРА. Нашу культуру создают сами сотрудники – мы их слышим и помогаем развиваться, чтобы #вместе переходить на новый уровень!