Юридическая фирма: судебная практика и сопровождение сделок. Облачные модели запрещены политикой конфиденциальности полностью, а поиск по архиву дел был нужен каждый день. Ниже история решения, у которого по условию не было права ходить в интернет.
Клиент под NDA: имя не разглашаем, потому что связаны договором о неразглашении, для наших контрактов это обычное условие. Отрасль, задача, ход работ и цифры настоящие.
Архив рос годами: тысячи дел, в которых уже были найдены нужные формулировки и выигрышные конструкции. Найти их повторно мог только тот, кто помнил дело лично, и это знание уходило из фирмы вместе с людьми.
Внешние модели закрыты политикой: материалы клиентов не должны покидать периметр даже обезличенными. Обычный путь «подключим облачный сервис» не обсуждался вовсе, и это сузило выбор до одного честного варианта. Как устроена своя модель в закрытом контуре и во что она обходится, показано в разборе своя нейросеть.
Посчитали экономику честно: на объёме фирмы своя модель окупается за год. При меньшем потоке мы бы сами отговорили от этой затеи.
Взяли открытую модель и дообучили на документах фирмы, не вынося наружу ни файла: обучение шло внутри периметра.
Развернули на сервере фирмы. Наружу не уходит ни одного запроса, и это не обещание, а свойство архитектуры: у контура нет выхода в интернет.
Новые версии модели проходят тестовый контур: сверяются на выборке дел и только потом встают в работу.
«Самая необычная приёмка в моей практике. Служба безопасности фирмы проверяла не «работает ли», а «точно ли никуда не ходит»: выключили внешнюю сеть и смотрели. Работает.»
Поиск по архиву занимает секунды, черновики типовых документов собираются из своей же практики. За одиннадцать месяцев решение сравнялось по цене с облаком, дальше идёт дешевле, и ни один запрос не покинул стены фирмы.
Услуга по теме: направление 05 «ИИ-сервисы» · все кейсы студии
Сервер стоит в офисе фирмы и физически не имеет выхода в интернет. Всё, что нужно модели, лежит рядом с ней.
Свой контур нужен там, где облако запрещено политикой или законом: юристы, медицина, оборонка, банки. Это не вопрос экономии, а вопрос допустимости.
Считать окупаемость надо честно: своё оборудование дороже на старте и выходит в ноль примерно за год при постоянной нагрузке. Если запросов мало, облако дешевле навсегда. И качество ответов будет ниже облачного, эту разницу закрывают подготовкой данных, а не мощностью сервера.
Окупаемость за одиннадцать месяцев считалась против облачного варианта, которого у этой фирмы всё равно не могло быть.
Своя модель в контуре дороже облака на старте: сервер, установка, обслуживание. Мы посчитали обе сметы на три года: разовые затраты на оборудование против ежемесячной оплаты обращений при том же объёме запросов. Точка равенства пришлась на одиннадцатый месяц.
Ноль запросов во внешние сервисы это не обещание, а свойство схемы: у сервера нет доступа в интернет на уровне сети. Проверяется не нашим словом, а настройками сети заказчика, и мы отдельно передали инструкцию, как это проверить самостоятельно.
Секунды на поиск по архиву это медиана по запросам юристов за месяц работы. В выборку вошли и тяжёлые запросы по всему архиву, и короткие по одному делу.
Закрытый контур закрывает и привычные лёгкие пути. Три решения с пилота, которые теперь входят в каждый проект без интернета.
При полном запрете на внешние сервисы модель отвечает скромнее облачной, и юристы это заметили сразу. Разницу закрыли не наращиванием модели, а порядком в архиве и точным поиском по нему. Об этой разнице мы говорим до подписания, а не после.
Дела хранились по-разному, часть сканами, часть в закрытых форматах, и первый поиск находил не то. Остановились и привели архив к единому виду вместе с заказчиком. Теперь оценка состояния архива стоит в диагностике первым пунктом.
Без интернета сервер не обновляется сам, а оставлять его без обновлений нельзя. Договорились о квартальном визите инженера с проверенным пакетом. Это стандартный пункт обслуживания для закрытого контура.
Проекты в закрытом контуре всегда длиннее облачных примерно вдвое.
Три недели на архив это не наша работа, а совместная с заказчиком. Без неё поиск находил бы не то, и проект остановился бы на второй неделе использования.
Назовите объём документов и ограничения безопасности, посчитаем, окупится ли своя модель.