Зина - Автономный голосовой помощник

Назначение

Автономный голосовой помощник «Зина» предназначен для использования в защищенных переговорных помещениях и в качестве центра управления устройствами в локальной доверенной сети. Ключевые пользователи — сотрудники организаций, работающие с конфиденциальной информацией, а также пользователи, нуждающиеся в автономном управлении умными устройствами. «Зина» позволяет записывать стенограммы мероприятий, формировать краткие выдержки итогов совещаний и создавать распоряжения, обеспечивая полную автономность работы без необходимости подключения к интернету.

Преимущества

Полностью автономная работа без подключения к интернету.
Использование передовых технологий больших языковых моделей (LLM) для обработки естественного языка.
Возможность управления доверенными устройствами в локальной сети.
Запись стенограмм мероприятий и формирование кратких выдержек.
Хорошее соотношение цена/качество, благодаря использованию графического ускорителя NVIDIA RTX 3050.
Адаптация языковой модели Mistral 7B для работы с русским языком.

Актуальность

Современные организации все чаще сталкиваются с необходимостью обработки конфиденциальной информации в условиях ограниченного доступа к интернету. Традиционные облачные решения не подходят для таких задач из-за рисков утечки данных. «Зина» предлагает полностью автономное решение, которое обеспечивает безопасность данных и позволяет эффективно управлять локальными устройствами, записывать и анализировать информацию в режиме реального времени.

Технология

«Зина» представляет собой автономный голосовой помощник, построенный на базе модифицированной языковой модели Mistral 7B, адаптированной для работы с русским языком.

Zina-1

Основные компоненты системы:

Нейросеть распознавания речи: преобразует голосовые команды в текст.
Text-to-Text нейросеть: обеспечивает семантическую обработку информации с использованием LLM-модели.
Нейросеть генерации речи: обеспечивает голосовую обрнатную связь для пользователя.
Модуль визуализации: цифровое воплощение «Зины» с использованием технологии lip sync.

«Зина» может быть интегрирована в локальную сеть для управления доверенными устройствами, такими как умные лампы, камеры и другие IoT-устройства. Ассистент также способен записывать стенограммы мероприятий, анализировать их и формировать краткие выдержки, что делает его незаменимым инструментом для проведения совещаний и мероприятий в защищенных помещениях.

Zina-3

Реализованы две версии голосового помощника «Зина»:

Умная колонка: обладает встроенным динамиком.
TV-приставка: звук и изображение выводятся по HDMI.

Проект Зина был представлен на выставке Армия-2024 и получил высокую оценку экспертов.

Уровень готовности технологии

TRL 4: Разработан детальный макет решения для демонстрации работоспособности технологии