Архитектор данных / DWH-архитектор (технический рецензент)

Ищем архитектора данных / DWH-архитектора для независимой технической рецензии проектируемого контура выгрузки данных из нескольких баз 1С во внешнее SQL/DWH-хранилище.

Основное обследование баз и подготовку единого архитектурного документа выполняет отдельный специалист по 1С. Рецензент не заменяет основного исполнителя и не обследует базы самостоятельно: его задача — проверить качество DWH-части решения и письменно зафиксировать существенные замечания.

Обязанности:

— проверить архитектуру staging-слоя, модель данных, технические и бизнес-ключи, дедупликацию;

— оценить обработку повторных загрузок, изменений задним числом и удалений;

— проверить атомарность обновления и состояние хранилища при прерывании загрузки;

— оценить журналирование, восстановление после сбоев и контроль полноты;

— проверить методику сверки сумм, остатков, оборотов и количества строк между источником и хранилищем;

— оценить масштабируемость решения с трёх пилотных баз примерно на 27 баз;

— провести два технических разбора с основным исполнителем;

— подготовить краткое письменное заключение с разделением замечаний на обязательные и рекомендательные.

Требования:

— практический опыт проектирования или эксплуатации DWH/ETL/ELT;

— понимание staging, моделирования данных, идемпотентности, атомарных загрузок и восстановления после сбоев;

— опыт построения контрольных сверок между источниками и хранилищем;

— способность предметно разбирать чужую архитектуру и письменно обосновывать замечания;

— опыт интеграции с 1С или другими ERP будет преимуществом, но не является обязательным.

Условия:

— проектная удалённая работа;

— общий объём участия — ориентировочно 10–20 часов в течение 3–6 недель;

— вознаграждение 250 000–400 000 ₸ за весь проект в зависимости от подтверждённого опыта и согласованного объёма;

— обычно без прямого доступа к базам: для рецензирования предоставляются архитектурные материалы, схемы и обезличенные примеры;

— оформление по договору оказания услуг;

— возможен потенциал дальнейшего сотрудничества при реализации и развитии DWH-контура.

В сопроводительном письме просим кратко ответить на три вопроса:

1. Какой реализованный DWH/ETL-проект наиболее близок к этой задаче и какова была ваша личная роль?

2. Как в нём решались повторные загрузки, частичные сбои и сверка данных с источником?

3. Какова ваша доступность и ближайшая возможная дата начала?

Отклики без описания личного практического опыта также рассмотрим, но приоритет будет отдан кандидатам, ответившим на эти вопросы.