| Наименование РИД |
Программа универсальной языковой модели кодировщик-декодировщик с памятью для предсказания следующего слова и слова в контексте
|
| Реферат |
Назначение программы: реализация универсальной языковой модели кодировщик-декодировщик с памятью. Позволяет предсказывать следующее слово в тексте и предсказывать слово по окружающему его контексту. Принцип работы: программа состоит из реализации универсальной языковой модели кодировщик-декодировщик с памятью и кода для предсказания следующего слова в тексте и слова по окружающему его контексту. Код для предсказания слов формирует вход в специальном формате для языковой модели и вычисляет значение перплексии на предоставленных наборах данных (Penn Treebank, LAMBADA). В основе универсальной языковой модели кодировщик-декодировщик лежит модель Т5, механизм памяти реализован с помощью специальных токенов, добавленных к входной последовательности. На выходе программа выдает значение метрики перплексия.
|
| Возможные направления использования |
Системы анализа текста
|
| Количество опытных образцов |
0
|
| Количество просмотров |
1
|
| Наличие дополнительных файлов |
True
|
| Использование РИД правообладателем |
False
|
| Внешнее использование РИД |
False
|
| НИОКТР (JSON) |
{}
|
| ИКСИ (JSON) |
[]
|
| ИКСПО (JSON) |
[{"last_status": {"created_date": "2026-01-21T10:36:28.946613+00:00", "registration_number": "826012100118-2", "status": {"name": "Подтверждена"}}, "copyright_protections": [{"protection_way": {"name": "Осуществлена государственная регистрация"}}]}]
|
| ОЭСР (JSON) |
[]
|
| Дата первого статуса |
2025-12-08T12:22:33.431120+00:00
|
| Предполагаемый тип результата |
Программа для ЭВМ
|
| Ожидаемая роль |
Исполнитель
|
| Заказчик |
ФОНД ПОДДЕРЖКИ ПРОЕКТОВ НАЦИОНАЛЬНОЙ ТЕХНОЛОГИЧЕСКОЙ ИНИЦИАТИВЫ
|
| Руководитель работы |
Микуленков Александр Сергеевич
|
| Руководитель организации |
Гаричев Сергей Николаевич
|
| Регистрационный номер НИОКТР |
АААА-А20-120061890104-4
|
| Последний статус |
Подтверждена, 625122200411-2, 2025-12-22 14:08:17 UTC
|
| ОКПД |
Услуги, связанные с научными исследованиями и экспериментальными разработками в области компьютерных наук и информационных технологий
|
| Ключевые слова |
анализ текстов; разговорный искусственный интеллект; предсказание следующего слова; кодировщик-декодировщик с памятью; универсальная языковая модель
|
| Исполнители |
Федеральное государственное автономное образовательное учреждение высшего образования "Московский физико-технический институт (национальный исследовательский университет)"
|
| Авторы |
Пугачёв Леонид Петрович; Куратов Юрий Михайлович
|
| Коды тематических рубрик |
28.23.25 - Модели и системы обучения
|
| OESR |
Компьютерные, информационные науки и биоинформатика (разработка аппаратного обеспечения относится к разделу 2.2, социальный аспект относится к разделу 5.8)
|
| Приоритеты научно-технического развития |
а) переход к передовым технологиям проектирования и создания высокотехнологичной продукции, основанным на применении интеллектуальных производственных решений, роботизированных и высокопроизводительных вычислительных систем, новых материалов и химических соединений, результатов обработки больших объемов данных, технологий машинного обучения и искусственного интеллекта;
|