Post #12844

Мухамад Салман Кабир, Гурген Согоян et al. разработали технологию, которая переводит мышечную активность руки в написанный текст — как будто человек пишет в воздухе, а ИИ это распознаёт и выводит буквы/цифры на экран. Для этого использовали новый неинвазивный метод оптомиографии (Optomyography, OMG) — оптическое измерение деформации мышц (лучше традиционной электромиографии EMG, без электродов и геля). С помощью ИИ-декодеров (GRUScribe на базе GRU и TransScribe на базе трансформеров) успешно распознавали 10 цифр и 33 русские буквы у 20 здоровых людей и 4 ампутантов — без сложной предварительной обработки сигналов. Прорыв в трёх ключевых аспектах: Первое в мире декодирование почерка (handwriting decoding) не из мозга, а из периферийных мышечных сигналов — сложная моторная задача, которую раньше решали только как классификацию отдельных символов. Переход от классификации к реконструкции непрерывной траектории движения — это позволяет распознавать естественный “почерк” в реальном времени, а не просто угадывать буквы. Использование оптической оптомиографии (OMG) вместо EMG: более чистый сигнал, выше соотношение сигнал/шум, устойчиво к помехам, полностью неинвазивно и удобно. Плюс работает даже у ампутантов. Это устанавливает новый стандарт для неинвазивных интерфейсов “мышца-компьютер” — перспективно для продвинутых протезов рук, общения парализованных людей и улучшенного управления гаджетами. https://ieeexplore.ieee.org/document/11269447/