AI-native LakeHouse

Не просто LakeHouse — LakeHouse с ИИ-ядром.

Хранилище, потоковая загрузка, модели, ИИ-агенты и голосовой канал — на одном открытом ядре, в закрытом контуре компании.

Скоринг, антифрод, агенты, голос — всё на одном ядре. Отказ от платформы — перенос файлов: данные остаются у вас.

Конвейер данных 01 / 04
источники → шина → ядро → потребители АБС / ERP файлы · API клик-поток звонки · платежи Kafka Debezium ЯДРО Iceberg LakeKeeper bronze silver gold SeaweedFS · RF2 два ЦОД отчёты модели агенты голос
слои: bronze → silver → goldtime travel · ACID
каждое действие — через авторизацию и журнал
01Запрос

идентичность агента

02Шлюз

LiteLLM · лимиты

03Фильтры

Presidio · LLM Guard

04Модель

vLLM локально

05OPA

политика как код

06Человек

крупные суммы

07Инструмент

реестр MCP

08Аудит

append-only

09Ответ

клиенту

> агент · клиентский ассистент
«Заявка №1147 одобрена — к оплате 5 000 BYN.
Сумма выше лимита → подтверждение клиента получено.
Действие записано в журнал: trace 8f31c2…
политика как кодотказ вне политики невозможен
gold-витрина · скоринг за окно отчётности
н1н2н3н4н5н6н7н8н9н10

признаки «на момент времени» — без утечки будущих сведений в обучающие наборы · версия модели зафиксирована в MLflow · дрейф — на контроле Evidently

Feast → KServeвоспроизводимость: данные+код+признаки
клиент говорит — платформа отвечает голосом
КЛИЕНТ «Провести оплату по заказу №1147» → текст 320 мс
АССИСТЕНТ «5 000 BYN по заказу №1147 — подтверждаете?» ← речь 280 мс
GigaAM → Qwen3-TTSбюджет диалога 500–800 мс
Лицензии0 $весь стек — свободное ПО
Контур2 ЦОД50/50, репликация, кворумы
ФорматIcebergоткрытый, без вендор-лока
ИИ-контур9–12 меспо очередям, с шлюзами качества
Консоль ArtHouse: источники → ядро LakeHouse → потребители, слои bronze / silver / gold
01Платформа

Данные идут одним путём: источник → шина → ядро → потребитель

Каждая стрелка — поток с контрактом данных: без контракта данные не принимаются. Слои bronze / silver / gold — это «как поступило» → очищенное с полной историей (Data Vault 2.0) → витрины, признаки и продукты данных. Переход между слоями — только при пройденных проверках качества.

ИСТОЧНИКИ АБС / ERP Файлы · API Клик-поток Транскрипты звонков Платежи · ЦБР Системные API ШИНА KAFKA Debezium · CDC ЯДРО LAKEHOUSE ICEBERG + LAKEKEEPER REST-каталог · time travel · ACID bronze сырые данные для конвейеров silver полная история · Data Vault 2.0 gold витрины · признаки · контракты ШЛЮЗЫ dbt · Great Expectations · сверка переход между слоями — после проверок ДВИЖКИ Sparkбатч · стриминг TrinoSQL · федеративные ClickHouseOLAP-витрины ПОТРЕБИТЕЛИ Отчётность Модели ИИ-агенты Голос Поиск Эксперименты ХРАНЕНИЕ SeaweedFS (S3 · RF2 · два ЦОД) · Linstor (PVC)
стрелка — поток с контрактом данных слои bronze → silver → gold · ядро Data Vault 2.0
02Сравнение

Почему не Data Lake и не «ещё один LakeHouse»

DATA LAKE Файлы без контрактов

Нет ACID, схема не проверяется, история отсутствует.

СТАНДАРТНЫЙ LAKEHOUSE Метаданные под замком

Смена вендора — экспорт и ежегодные платежи; сборка OSS — всё на вашей команде.

ARTHOUSE Открытое ядро, закрытый контур
  • Открытый Iceberg: уход — перенос файлов и таблиц
  • 99-З, неизменяемый аудит, цикл моделей — в архитектуре
  • Агенты, голос и RL — в том же контуре
  • Лицензии на ПО — 0 $
03Как это выглядит

Рабочие поверхности платформы

Витрины, журналы и диалоги агента — это то, чем ежедневно пользуются аналитики, разработчики моделей и бизнес.

gold.applications
-- Trino: заявки и скоринг на дату отчёта
SELECT client_ref, amount, score
FROM gold.applications
WHERE valid_on = DATE '2026-10-31'
  AND score > 0.72;
Витрины gold строятся из ядра Data Vault — выборка на дату без «будущих» сведений.
audit.events · append-only
// журнал нельзя переписать даже админу
{ "trace": "8f31c2a9",
  "agent": "ops-assistant",
  "action": "order.submit",
  "amount": "5000 BYN",
  "policy": "opa:confirm-required",
  "human": "approved",
  "ts": "2026-11-20T14:03:11Z" }
Неизменяемый аудит в Iceberg + WORM-контур хранилища: сквозной trace_id через все компоненты.
assistant · диалог
клиент: какие документы нужны для договора?
агент: Паспорт и реквизиты. Оформить
        заявку №1147?
клиент: да, оформляйте
агент: 5 000 BYN → подтверждение
        клиента · исполнено · записано
Действия с деньгами — только через центр авторизации OPA и подтверждение человека.
04ИИ-ядро

Каждый запрос агента — под контролем

Агент не видит сырых таблиц: ему доступны онтология, показатели семантического слоя и продукты данных. Маршрут любого запроса одинаков — от фильтров до неизменяемого журнала аудита.

01Запрос

идентичность Keycloak + SPIFFE

02Шлюз LiteLLM

лимиты, учёт затрат

03Фильтры входа

Presidio, LLM Guard, NeMo

04Модель

vLLM локально за шлюзом

05Фильтры выхода

Guardrails: схема ответа

06OPA

политика как код

07Человек

деньги и данные

08Инструмент

реестр MCP, права

09Аудит

append-only в Iceberg

Пункты 06–07 — центр решений авторизации: агент физически не может исполнить действие вне политики.

ML-ЦИКЛОбучение → реестр → инференс

MLflow, Feast, KServe; дрейф — Evidently.

АГЕНТЫLangGraph + реестр MCP

Проверки в CI, теневой → канареечный → рабочий.

ГОЛОСРаспознавание и синтез

GigaAM + Qwen3-TTS, задержка диалога 500–800 мс.

ДОБУЧЕНИЕRL на оценках людей

TRL / verl / LLaMA-Factory; бандиты для персонализации.

05Сценарии

Что вы получаете на выходе

Поверх одного ядра — рабочий набор задач. Каждый сценарий берёт витрины, признаки и API платформы, а не отдельную копию данных.

Скоринг заявок Антифрод и AML — графовые связи Персонализация предложений Голосовые ассистенты Распознавание документов Запросы на естественном языке Регуляторная отчётность Операции с цифровым рублём Операционная аналитика Клик-поток и поведенческие признаки
  • СВЕРКА«Откуда цифра» — один вопрос регулятора

    Полная история атрибута в Data Vault, сверка с источниками.

  • АМЛГраф мошеннических схем из ядра

    Хабы — вершины, связи — рёбра. Без отдельного моделирования.

  • СКОРОСТЬПризнаки «на момент времени»

    Без утечки будущего в обучающие наборы; онлайн — через Feast.

  • 06Внедрение

    Очереди с результатом на каждом шаге

    1. 01 · мес 1–2Основание

      Kubernetes (Talos), Istio, OpenBao, Keycloak, мониторинг, хранение, ядро Iceberg.

    2. 02 · мес 2–4Ядро хранилища

      Потоки из систем-источников, bronze/silver/gold, «золотая запись» клиента, контроль качества, DataHub, Superset, AML-графы.

    3. 03 · мес 4–6Первые модели

      Пакетный скоринг и антифрод, RAG-поиск по документам, контроль дрейфа, контракты данных в CI.

    4. 04 · мес 6–9Реальное время

      Клик-поток, онлайн-признаки, онлайн-инференс KServe, витрины ClickHouse, персонализация бандитами.

    5. 05 · мес 9–12Полный ИИ-контур

      Шлюз моделей, агенты LangGraph + MCP, фильтры, голосовые сценарии, цикл дообучения.

    6. 06 · мес 12+Перспективные

      Голосовая биометрия (после правовой проработки), распознавание документов в промзону, синтетика.

    Первые две очереди — команда 6–7 человек за 4–5 месяцев; полный контур — около 10 человек, 9–12 месяцев. Критический путь — «золотая запись» клиента и хаб агентов.

    07Вопросы

    Коротко о главном

    Где хранятся данные в ArtHouse?

    В контуре организации — on-prem, два центра обработки данных с репликацией. Данные хранятся один раз в открытом табличном формате Apache Iceberg поверх объектного хранилища.

    Сколько стоят лицензии на программное обеспечение?

    Лицензионные платежи за ПО отсутствуют: весь стек — свободное ПО (Apache 2.0, MIT, BSD, MPL). Затраты — на оборудование, внедрение и сопровождение. Лицензии компонентов проверяются ежеквартально.

    Как выполняются требования закона РБ № 99-З о персональных данных?

    Персональные данные токенизируются на входе, в витринах маскируются по ролям, ведётся неизменяемый журнал аудита, реализовано удаление данных по требованию субъекта с каскадом по производным.

    Что произойдёт с данными при отказе от платформы?

    Данные останутся у вас: они хранятся в открытых форматах (Parquet/Iceberg), перенос — это копирование файлов и таблиц, а не экспорт из закрытого продукта.

    Нужно ли оборудование с GPU?

    Для ИИ-контура — да: стартовый узел 4×H200 с NVLink (голос, агенты, документы, обучение), второй узел добавляется со второй очереди. Хранилище и отчётность работают без GPU.

    Когда будет первый результат?

    Ядро хранилища с загрузкой из систем-источников и витринами — к 4-му месяцу внедрения, первые модели скоринга и антифрода — к 6-му, полный ИИ-контур с голосовыми сценариями — к 12-му.

    08Демо

    Запишитесь на демонстрацию

    Покажем платформу в работе: конвейер данных, витрины, обучение и развёртывание модели, ИИ-агента. Подготовим демо под ваши задачи — укажите, что интереснее.

    Заявка формируется в вашем почтовом клиенте и уходит на адрес команды. Обычно отвечаем в течение одного рабочего дня.

    после заявки: 45–60 минут онлайн → разбор вашего сценария → оценка этапов и сроков