Top.Mail.Ru
  • USD Бирж 1.17 -8214.8
  • EUR Бирж 10.94 -84.37
  • CNY Бирж 26.51 --15.57
  • АЛРОСА ао 46.32 +-0.23
  • СевСт-ао 1013 +-0.8
  • ГАЗПРОМ ао 126.73 +-0.1
  • ГМКНорНик 110.6 +-0.12
  • ЛУКОЙЛ 6238 +-22.5
  • НЛМК ао 109.26 -0.34
  • Роснефть 436.2 +-0.75
  • Сбербанк 314.26 +-0.33
  • Сургнфгз 22.525 +-0.04
  • Татнфт 3ао 661.7 +-4.7
  • USD ЦБ 78.53 78.47
  • EUR ЦБ 92.27 92.28
Эксперт года 2025 – прием заявок завершен
Лента новостей

Ученые из Петербурга создали систему для общения врачей с глухими пациентами

Ученые из Петербурга создали систему для общения врачей с глухими пациентами
Фото: unsplash.com
Специалисты Петербургского Федерального исследовательского центра РАН (СПб ФИЦ РАН) разработали цифровую систему, которая позволяет пациентам с нарушениями слуха общаться с врачами и получать необходимую помощь.

Новая программа распознает язык жестов в медицинской сфере и преобразует его в текст для врачей, сообщил старший научный сотрудник лаборатории речевых и многомодальных интерфейсов СПб ФИЦ РАН Дмитрий Рюмин.

Разработанная система функционирует следующим образом: установленная видеокамера фиксирует жесты пациентов, после этого программа автоматически преобразует язык жестов в текст в режиме реального времени. Точность системы, по словам разработчиков, составляет более 90%.

В основу системы легла база данных, собранная специалистами СПб ФИЦ РАН совместно с межрегиональным центром реабилитации лиц с проблемами слуха города Павловска. Датасет включает в себя 85 жестовых высказываний, актуальных для приема у врача, каждое из которых записано 12 дикторами в пяти вариантах. Такое разнообразие необходимо для повышения точности машинного обучения и считывания языка жестов пациентов в реальных условиях.

Это связано с тем, что русский жестовый язык (РЖЯ) может отличаться в разговорах людей разного возраста, пола, региона происхождения. Кроме того, в России кроме «литературного» РЖЯ существует живая «калькирующая жестовая речь», которая отличается от базового языка жестов. Этот фактор также учтен в созданной системе.

Последние материалы
Экономика вдохновленная и вдохновляющая
Аналитика ,Вчера 17:00
Июнь традиционно проходит под знаком Петербургского международного экономического форума.
В Петербурге поздравили избранных членов регионального отделения РАН
Мероприятия ,Вчера 16:38
Торжественная церемония прошла в историческом здании Российской Академии наук.
Законы, вступающие в силу с начала июля
Общество ,Вчера 16:04
Защита инвестиций, контроль за цифровым рублем, ответственность для иноагентов, кибербезопасность.