Внедрение OpenMetadata и каталога данных
OpenMetadata собирает технические сведения о данных в одном поисковом каталоге и добавляет к ним человеческий контекст: владельца, описание, glossary term, тег и обсуждение. Ingestion регулярно читает metadata из базы, BI или оркестратора, а lineage показывает доступные связи между источником, преобразованием и отчётом. Мы создаём платформу и рабочий процесс, благодаря которому каталог продолжает обновляться после запуска.
Когда стоит обратиться
Обычно к нам обращаются в таких ситуациях:
- Аналитик видит одинаковые названия таблиц в нескольких базах и тратит время на поиск актуальной версии и владельца.
- После изменения ETL команда хочет понять, какие витрины и дашборды используют поле, но связи хранятся в головах разработчиков.
- Компания запускает data governance и хочет начать с технически живого каталога вместо отдельной таблицы описаний.
Что именно мы сделаем
Определяем пользователей, домены данных, источники, владельцев, сценарии поиска, доступы и инфраструктуру OpenMetadata.
Разворачиваем платформу с внешней базой, поиском, backup, SSO либо выбранной авторизацией и наблюдаемостью.
Подключаем connectors и ingestion workflows, задаём фильтры, расписания, владельцев и контроль свежести загрузок.
Настраиваем glossary, теги, описания, domains и доступную lineage на выбранных контрольных таблицах и дашбордах.
Проводим пилот с аналитиками, исправляем качество metadata и передаём правила сопровождения и добавления источников.
Что входит в стоимость
129 900 ₽ за всю работу
Разворачиваем OpenMetadata в production-подходящей конфигурации с внешней базой и поддерживаемым поисковым движком, подключаем выбранные базы, BI или оркестратор через официальные connectors. Для каждого ingestion workflow задаём service account, расписание, фильтры, profiler и lineage возможности конкретного источника. На дату исследования репозиторий отмечает выпуск 1.13.0, а документация по развертыванию и connectors проверяется по фактически выбранной стабильной версии.
Что будет готово
Передадим вам
- Развёрнутый OpenMetadata с production-базой, поиском, авторизацией, backup и наблюдаемыми ingestion workflows.
- Подключённые источники, пилотный domain, владельцы, glossary, теги, описания и доступная lineage контрольных объектов.
- Регламент качества каталога, журнал загрузок, протокол приёмки и инструкция подключения следующего источника.
Перед сдачей проверим
- Пользователь находит контрольную таблицу и дашборд по названию и термину, видит владельца, описание и время обновления metadata.
- Ingestion выполняется по расписанию, журнал показывает успешные и ошибочные объекты, повтор обновляет существующие сущности.
- Контрольная lineage отображает подтверждённые связи с источником, а происхождение автоматической и ручной связи понятно владельцу данных.
Как это выглядит на практике
Показатель отчёта получает владельца и происхождение
- 01
Финансовый дашборд использует витрину, которую обновляет Airflow из PostgreSQL, но описание показателя хранится в переписке.
- 02
Connectors загружают таблицы, pipeline и дашборд, lineage связывает доступные шаги, а glossary фиксирует термин и формулу.
- 03
Владелец домена подтверждает описание, назначает ответственного и отмечает уровень важности контрольной витрины.
- 04
Аналитик ищет термин, открывает дашборд, проходит к таблице и pipeline и видит время последней успешной загрузки metadata.
Что понадобится для работы
От вас
- Список баз, BI, pipelines и приоритетных доменов, версии систем, сетевые адреса и владельцы данных.
- Service accounts с правами чтения metadata, инфраструктура для OpenMetadata, домен, TLS и способ авторизации пользователей.
- Пилотные таблицы и дашборды, glossary или список терминов, требования к backup, журналам и сроку обновления каталога.
Если у вас немного другая ситуация
Небольшие уточнения, которые помогают довести согласованный результат до рабочего состояния, уже учитываем в цене. Если по ходу работы появится отдельный крупный блок или понадобится платная лицензия, сначала обсудим варианты и стоимость. Расскажите о своей ситуации — подстроим план под неё.
- 3 000 ₽после подписания договора через Диадок
- 126 900 ₽после выполнения, демонстрации и приёмки результата
Предоплата входит в общую стоимость. Оставшуюся сумму оплачиваете после демонстрации и приёмки готовой работы.
Часто спрашивают
Об этой услуге
Что именно хранит каталог OpenMetadata?
Он хранит metadata таблиц, полей, дашбордов, pipelines и других сущностей, а также владельцев, описания, теги, glossary и связи lineage.
Какие источники можно подключить?
Выбираем базы, BI, оркестраторы, messaging и ML-системы из официального списка connectors конкретной версии и проверяем нужные возможности ingestion.
Откуда появляется lineage?
Связи приходят из connector, query logs, dbt и pipeline metadata либо добавляются через API и интерфейс по утверждённому процессу.
Зачем OpenMetadata отдельная база и поиск?
Платформа хранит собственные сущности в relational database и использует search backend для быстрого каталога; production требует устойчивых внешних компонентов.
Можно подключить SSO?
Да. Настраиваем поддерживаемый способ авторизации и роли, связывая группы с правами просмотра, редактирования и администрирования каталога.
Как контролируется свежесть metadata?
Каждый ingestion workflow имеет расписание, статус и журнал, а приёмка проверяет время последнего успешного запуска и изменение контрольного объекта.
Кто будет заполнять описания после запуска?
Назначаем владельцев доменов и простые правила: технические поля приходят автоматически, бизнес-термины и пояснения подтверждают ответственные команды.
Как проверить полезность каталога?
Пилотные пользователи решают реальные задачи поиска владельца, определения показателя и просмотра lineage, а результаты фиксируются в протоколе приёмки.
Цена и изменения по ходу работы
Цена на странице окончательная?
Да. Перед началом мы сверяем исходные данные и фиксируем результат в договоре. Указанная на странице сумма покрывает согласованную работу целиком, даже если её техническая реализация потребует больше времени, чем ожидалось при оценке.
Что означает резерв незапланированных работ?
Это уже включённый в цену запас времени на небольшие связанные уточнения заказчика, которые появляются после старта: например, добавить поле, изменить формат уведомления или учесть ещё одно условие обработки.
Резерв рассчитывается по формуле: стоимость услуги × 30% ÷ 1 500 ₽. Для услуги за 30 000 ₽ это 6 часов. Эти часы относятся только к дополнительным, заранее незапланированным уточнениям. Они не являются сроком проекта и не ограничивают время на основную работу: согласованный результат мы выполняем полностью.
Можно уточнять детали уже во время работы?
Да. Небольшие связанные изменения обычно помещаются во включённый резерв и не требуют доплаты. Если новая идея заметно меняет результат или превращается в самостоятельную задачу, сначала обсудим подход и стоимость. Любое решение согласуем до выполнения.
Начало работы и оплата
Как оформляются договор и оплата?
Подписываем договор через Диадок. Предоплата составляет 3 000 ₽ и входит в общую стоимость услуги. Остаток оплачивается после демонстрации и приёмки готового результата.
Когда начинается срок выполнения?
Срок отсчитывается после согласования задачи, получения необходимых доступов и материалов, подписания договора и поступления предоплаты. Конкретную дату старта и плановый день готовности подтверждаем перед началом.
Как учитываются платные лицензии и внешние сервисы?
До старта проверяем, нужны ли тарифы, лицензии, сертификаты или дополнительные ресурсы внешних систем. Если они потребуются, заранее покажем варианты и стоимость. По возможности аккаунты и лицензии оформляются сразу на заказчика.
Проверка результата и гарантия
Как принимается готовая работа?
Вместе проверяем согласованные сценарии на контрольных данных или тестовой копии, а затем демонстрируем результат. Для интеграций сверяем передачу данных и обработку ошибок, для сайта — работу нужных страниц и действий пользователя, для отчёта — расчёты и обновление данных.
Какая гарантия действует после сдачи?
На выполненные изменения действует гарантия 3 месяца. Если в изменённой нами части обнаружится ошибка нашей реализации, проверим и исправим её без дополнительной оплаты. Переданные материалы, настройки и код остаются у заказчика.
Связанные шаги
- 01Карта происхождения данных Data Lineage
Подготовить карту источников данных
- 02Внедрение OpenMetadata и каталога данных
Запустить корпоративный каталог
- 03Контроль качества данных ETL и импортов
Добавить контроль качества загрузок