Подняли инфраструктуру корпоративного доступа к LLM

LLM-решение для повышения эффективности команд

О продукте

Единое решение, которое обеспечивает сотрудникам доступ к необходимым для работы LLM, позволяет собирать статистику использования и повышает продуктивность работы.

outstaff-icon

2 человека

КОМАНДА
time-icon

2 недели

ПЕРИОД РАБОТЫ

Достижения

star.svg

80% звонков теперь имеют meeting notes с action items, что повышает продуктивность работы команд

question.svg

Какая была задача

Наш клиент столкнулся с несколькими проблемами, связанными с использованием искусственного интеллекта:

  • В РФ недоступны многие модели ИИ, поэтому каждому сотруднику приходилось регистрироваться в отдельных сервисах и обходить ограничения. 
  • Внутренние проекты компании, в которых задействован AI, тоже требовали зарубежного хостинга. 
  • Не все LLM одинаково эффективны для разных задач (например, для работы с кодом больше подходит Claude, а для генераций – ChatGPT).
question.svg

Решение

В ответ на эти вызовы мы внедрили единый инструмент, который позволяет сотрудникам компании работать со всеми необходимыми моделями ИИ. Решение основано на открытых наработках, имеет богатую функциональность и может быть интегрировано в короткие сроки.

Мы подняли и настроили инфраструктуру, подключили к API и сгруппировали пользователей, чтобы давать им доступ в зависимости от бизнес-ролей. Например, для системных и бизнес-аналитиков представлены определенные модели, наиболее подходящие для решения их задач.

Кроме того, мы реализовали систему сбора статистики. Аналитика ежемесячно показывает, насколько часто и в каком объеме сотрудники пользуются ИИ-моделями. Полученные данные влияют на прогнозирование бюджета: оплата за использование ИИ зависит от количества токенов (слов), которые пользователи запрашивают у модели и получают в ответ. Также есть возможность отслеживать, чтобы LLM использовались по рабочим вопросам, а не для личных нужд.

Сейчас продолжаем обновлять продукт и актуализировать модели ИИ (Chat GPT, Gemini, Deepseek, Mistral, Claude), следя за последними тенденциями и апдейтами технологий.

question.svg

Результаты

Внедрение нашего инструмента помогло клиенту не только решить проблемы с доступом к ИИ, но и создать более продуктивную рабочую среду для своих сотрудников.

  • Единое решение. Сотрудники авторизуются в единой системе и без препятствий получают доступ к актуальным моделям ИИ, что упрощает рабочий процесс.
  • Управляемый доступ. Настройка доступа по группам позволила адаптировать инструмент под конкретные роли, повышая общую эффективность.
  • Глубокая аналитика. Регулярный анализ использования ИИ-моделей помогает руководству компании лучше понимать потребности сотрудников и планировать бюджет.
  • Развита культура работы с LLM. Раньше ими пользовались отдельные специалисты, а теперь 80% сотрудников заходят минимум раз в неделю, что делает работу результативнее.

Основные функции

  • Ведение нескольких диалогов с разными ИИ
  • Архивирование и экспорт диалогов
  • Мультимодальность – поддержка работы с разными типами данных (документы, таблицы, изображения, код)
  • Редактирование учетной записи пользователя
  • Админ-панель для настройки интерфейса, соединения, моделей и пр.
  • Управление списком пользователей и уровнем прав
  • Группировка пользователей с доступом к разным моделям
  • Аналитика, статистика использования сервиса
Ведение нескольких диалогов с разными ИИ
Архивирование и экспорт диалогов
Мультимодальность – поддержка работы с разными типами данных (документы, таблицы, изображения, код)
Редактирование учетной записи пользователя
Админ-панель для настройки интерфейса, соединения, моделей и пр.
Управление списком пользователей и уровнем прав
Группировка пользователей с доступом к разным моделям
Аналитика, статистика использования сервиса
01 Ведение нескольких диалогов с разными ИИ
02 Архивирование и экспорт диалогов
03 Мультимодальность – поддержка работы с разными типами данных (документы, таблицы, изображения, код)
04 Редактирование учетной записи пользователя
05 Админ-панель для настройки интерфейса, соединения, моделей и пр.
06 Управление списком пользователей и уровнем прав
07 Группировка пользователей с доступом к разным моделям
08 Аналитика, статистика использования сервиса
Ведение нескольких диалогов с разными ИИ
Архивирование и экспорт диалогов
Мультимодальность – поддержка работы с разными типами данных (документы, таблицы, изображения, код)
Редактирование учетной записи пользователя
Админ-панель для настройки интерфейса, соединения, моделей и пр.
Управление списком пользователей и уровнем прав
Группировка пользователей с доступом к разным моделям
Аналитика, статистика использования сервиса

Технологии

Alt docker
Alt AI/ open webUI
Alt grafana/loki
Alt prometheus

Хотите такой же или похожий продукт? Заполните заявку ниже, мы свяжемся с вами, чтобы обсудить вашу задачу

Оставьте ваши контакты:
Ссылка на тех. задание или прикрепить файл
Сообщение:
Ваша заявка успешно отправлена!
Мы получили ваше обращение, наши менеджеры свяжутся с вами в течение 24 часов
Вернуться на главную
Ваша заявка не отправлена!
Что-то пошло не так, попробуйте снова

Посмотрите другие продукты: