Учёные Балтийского федерального университета имени Иммануила Канта (БФУ) разработали нейросетевую мультимодальную модель, способную выявлять нарушения работы головного мозга по аудиозаписи человеческой речи. Разработка поможет врачам проводить первичную диагностику пациентов с когнитивными нарушениями без сложного и дорогостоящего оборудования.
Исследователи БФУ создали модель, которая анализирует как смысловые, так и звуковые особенности речи пациента, улавливая маркеры, незаметные для человеческого уха. Это открывает новые возможности для ранней диагностики заболеваний мозга, включая деменцию, болезнь Альцгеймера и другие когнитивные расстройства.
Как это работает
Разработанная нейросетевая мультимодальная модель анализирует речь по двум ключевым направлениям.
1. Семантический анализ (смысловой)
Нейросеть оценивает:
- Связность и логичность высказываний
- Богатство словарного запаса
- Способность подбирать нужные слова
- Сложность грамматических конструкций
- Скорость речевого реагирования
2. Звуковой анализ (акустический)
Модель фиксирует:
- Темп речи
- Паузы и их длительность
- Интонационные особенности
- Чёткость произношения
- Изменения тембровых характеристик голоса
Что даёт технология
Преимущества метода:
- Простота сбора данных — достаточно аудиозаписи короткого разговора
- Неинвазивность — не требует контакта с телом пациента
- Возможность дистанционной диагностики — через телефон или видеосвязь
- Быстрота анализа — нейросеть обрабатывает запись за минуты
- Доступность — не требует дорогостоящего медицинского оборудования
Практическое применение
Разработка может использоваться на этапе первичной диагностики для:
- Скрининга пациентов групп риска
- Мониторинга динамики состояния при лечении
- Оценки эффективности терапии
- Дистанционного наблюдения за пациентами в отдалённых регионах
- Раннего выявления когнитивных нарушений у пожилых людей
Технология особенно актуальна для регионов с ограниченным доступом к узким специалистам, где первичную оценку состояния пациента может провести терапевт с использованием нейросетевого инструмента.
Научная основа
Работа учёных БФУ опирается на многолетние исследования взаимосвязи между речевыми нарушениями и когнитивными функциями. Известно, что изменения в речи часто появляются задолго до других симптомов нейродегенеративных заболеваний. Новый метод позволяет обнаруживать эти изменения на самых ранних стадиях.
Мультимодальный подход — сочетание анализа смысла и звучания — даёт более точные результаты, чем использование только одного типа данных, и снижает вероятность ложных срабатываний.
✨ Райский блог желает: Пусть добрые новости из России вдохновляют вас на большие дела. Мира, добра и процветания вашей семье и нашей великой стране! С теплом, ваш Райский блог.
Источники
- Балтийский федеральный университет имени Иммануила Канта — пресс-релиз, 2026
- Российский научный фонд — данные по исследованию, 2026
