Архитектор решений

VK Data Platform — универсальная платформа для end‑to‑end работы с большими объёмами данных и машинным обучением. Выступает в роли единого окна для доступа и управления корпоративными данными и инфраструктурой. Единый слой управления платформой и запуск компонентов на базе Kubernetes.

Задачи

• взаимодействие с заказчиками и партнерами для выявления и фиксации их потребностей и уточнения требований к решению;
• участие в анализе документации, предоставляемой заказчиком: опросники, ФТТ, ТЗ, документация по текущему решению для сценариев миграции и т.п.;
• участие в выборе технологий, проведение архитектурных сессий, разработка архитектуры решения и интеграции, согласование архитектурных и проектных решений;
• участие в разработке технической документации: ТЗ, ТКП, оценка необходимых серверных мощностей и др.;
• участие в заполнении опросников по продуктам Дата Платформы VK Tech, подготовке демо-стендов и разработке PoC (прототипов) систем с использованием технологий VK Tech;
• участие в реализации проектов, демонстрациях и приемо-сдаточных испытаниях;
• диагностика технических, инфраструктурных, функциональных проблем (совместно с аналитиками и QA) и принятие мер по их устранению;
• сопровождение и консультирование ключевых клиентов и партнеров, архитектурный надзор;
• взаимодействие с командами продуктов, продаж и смежными проектными командами. 

Требования

• опыт работы в роли архитектора - от 3 лет;
• опыт работы с Enterprise-заказчиками;
• опыт работы с DWH, Data Lake, Data Lakehouse, понимание паттернов, инструментов и методов проектирования Хранилищ Данных;
• опыт построения NRT/streaming решений и основных инструментов (Flink, Kafka, NiFi, Kafka Streams, Spark Streaming)
• знание набора OpenSource-технологий для построения Хранилищ Данных (Hadoop, Spark, Airflow, NiFi, Kafka, Flink, Clickhouse, Greenplum, Iceberg, Trino);
• знание SQL, Python, Scala/PySpark;
• опыт создания решений управления данными, контроля качества (Data Quality) и доставки данных, Data Governance. Знание каталогов данных на базе OpenMetaData или DataHub;
• умение документировать архитектурные решения;
• понимание основ ИБ и защиты проектируемых решений;
• опыт работы с технологиями виртуализации и контейнеризации, а также с системами хранения данных в средах виртуализации;
• навыки работы с инструментарием архитектора: Jira, Confluence, Gitlab, Draw.io/Visiо.

Будет плюсом

• опыт работы с инструментами Ansible, Terraform;
• знания в области Machine Leaning, LLM, организации MLOps процессов, понимание жизненного цикла моделей и интеграции с Хранилищем;
• опыт работы с облачными продуктами и технологиями;
• опыт работы с SAP, Vertica, Exadata, Informatica, а также BI-инструментами; 
• опыт в организации DevOps, DataOps; 
• опыт разработки, проектирования или поддержки высоконагруженных и распределенных систем, cloud-native приложений, интеграционных решений; 
• опыт работы с Grafana и другими системами мониторинга.