Разработан алгоритм, который может перехватывать ввод по звуку клавиш с точностью 95%
Работает и с механикой, и с мембранными клавиатурами.
Команда исследователей из Великобритании нашла способ перехвата данных о нажатии клавиш при помощи микрофона и нейросети. Разработанная модель смогла предсказать, что напечатано на клавиатуре, с точностью до 95%.
Сначала алгоритм требуется обучить, как на определённой клавиатуре звучит нажатие конкретной клавиши. Это можно сделать как локально через микрофон, так и удалённо — например, во время видеозвонка.
В рамках демонстрации исследователи записали по 25 нажатий для 36 клавиш ноутбука MacBook Pro. При записи на микрофон iPhone 13 mini на расстоянии 17 см от клавиатуры точность классификатора составила 95%, при записи через видеозвонок в Zoom — 93%, через Skype — 91,7%.
Этот тип атаки лучше работает с механическими клавиатурами, которые издают отчётливый звук при печати. Но исследователям удалось добиться высокой точности и с мембранными клавиатурами. Среди способов защиты предлагается включать при наборе генератор белого шума или перейти на сенсорную клавиатуру.