Мы строим платформу данных на архитектуре Lakehouse, покрывающую весь жизненный цикл работы с данными: от поставки и обработки до анализа и визуализации. Платформа интегрирована с большим числом Managed-сервисов Yandex Cloud и рассчитана не только на дата-инженеров и аналитиков, но и на широкий круг бизнес-пользователей.
Наша команда разрабатывает компоненты для взаимодействия с платформой и работы с данными. Среди наших задач — собственная реализация REST Catalog для управления метаданными таблиц Apache Iceberg, инфраструктура браузерной среды разработки для написания пайплайнов обработки данных, а также инструменты для ИИ-ассистентов.
Это хороший мэтч для инженера, которому интересно работать на стыке бэкенд-разработки, дата-инфраструктуры, облачных сервисов и developer experience. У нас есть как задачи продуктового уровня, так и глубокие технические вызовы: метаданные, интеграции, изоляция пользовательских окружений, производительность, надёжность и инфраструктура разработки.
Какие задачи вас ждут:
Развивать функциональность платформы
Вам предстоит реализовывать новые возможности и улучшать уже существующие: добавлять поддержку разных способов обработки данных, развивать пользовательский опыт, повышать стабильность работы сервиса и расширять его функциональность.
Расширять интеграцию с сервисами Yandex Cloud
Мы хотим дать пользователям удобный доступ к инструментам получения, обработки и хранения данных. Вам предстоит интегрировать возможности других сервисов Yandex Cloud в платформу, чтобы пользователи могли сосредоточиться на работе с данными, а не на настройке инфраструктуры.
Работать над масштабируемостью, стабильностью и скоростью сервиса
Команда отвечает за весь жизненный цикл компонентов: от проектирования и разработки до развёртывания, эксплуатации и поддержки окружений.
В наших задачах всегда есть место актуальным инфраструктурным вызовам: проектированию архитектурных решений, развитию мониторинга и диагностики, ускорению операций с виртуальными машинами, повышению надёжности работы с ними и оптимизации CI/CD-пайплайнов.
Больше о том, что под капотом платформы Yandex Cloud, — в канале Inside Yandex Cloud
Мы ждем, что вы:
- Уверенно знаете Java, PostgreSQL и Linux
- Понимаете базовые алгоритмы, структуры данных и области их применения
- Умеете тестировать собственный код
- Проводите качественное ревью чужого кода
- Легко и продуктивно взаимодействуете с другими командами
- Умеете не только решать проблемы, но и находить их корневые причины
- Имеете широкий технический кругозор
Будет плюсом:
- Работали с Go
- Разрабатывали микросервисные системы
- Работали с разными источниками данных: KV-хранилищами, реляционными БД, файловыми системами
- Знакомы с SRE-подходами или DevOps-практиками
- Работали с Unix-системами и сетевыми технологиями