Як шахраї використовують ШІ та Zoom для крадіжки паролів з клавіатури

Дослідники штучного інтелекту стверджують, що за звуками відеодзвінків у Zoom ШІ з точністю до 93% може визначити, які клавіші натискає співрозмовник та що набирає. Про це пише Arstechnica.

Чому не 100%? На точність впливають стиль набору тексту, паролі у кількох регістрах та незвичайні моделі ноутбуків.

Британські дослідники Джошуа Гаррісон, Ехсан Торейні та Мар’ям Мернежад з Корнельського університету стверджують, що вони натренували модель глибокого навчання на записах відеодзвінків та досягли 93% точності інтерпретації віддаленого натискання клавіш на основі звукових профілів окремих клавіш.

У статті троє дослідників стверджують, що популярність машинного навчання, мікрофонів і відеодзвінків «є більшою загрозою для клавіатур, ніж будь-коли». 

У тихих громадських місцях, як-от кав’ярні, бібліотеки чи офіси, дуже легко записувати звуки клавіатур чужих ноутбуків. Більшість сучасних ноутбуків мають уніфіковані, немодульні клавіатури з однаковими акустичними профілями в усіх моделях.

На чому засноване прослуховування звуків клавіатури

Підписуйтеся на наші соцмережі

Прослуховування VoIP-дзвінків через Skype без фізичного доступу до суб’єкта давало 91,7% точності розшифрування натискань клавіатури у 2017 році та 74,3% у 2018-му. 

Поєднавши результати інтерпретації натискання клавіш із «прихованою моделлю Маркова» (HMM), яка прогнозує порядок натискання клавіш та виправляє «прмвіт» на «привіт», можна збільшити точність розшифроврування аудіо з 72 до 95%. 

Для навчання ШІ дослідники з Корнела використали ноутбук MacBook Pro 2021 року, який має стандартну клавіатуру. Вони по 25 разів натискали кожну з 36 клавіш, щоб навчити свою модель звуків кожної клавіші. 

Звук клавіатури для першого тесту записували через iPhone 13 mini на відстані 17 см. Під час другого тесту запис вели через Zoom за допомогою вбудованих мікрофонів MacBook із встановленим найнижчим рівнем приглушення шуму Zoom. В обох тестах дослідники досягли точності більш ніж 93%. Аудіо з телефону мало точність до 95-96%.

Як захистити себе від крадіжки паролів через аудіомоделі ШІ

Автори дослідження надали декілька порад, як захиститися від шахраїв, які можуть підслуховувати ваш ноутбук у публічному місці.

Ще один варіант — носити із собою нестандартні клавіатури, бажано механічні, з різними типами перемикачів.

Атаки на конфіденційні дані за допомогою аудіоканалу іноді згадують у дослідженнях. Проте у новинах про витік даних вони майже не фігурують.

Раніше вчені використовували звуки клавіатури для розшифрування ключів PGP, а машинне навчання та мікрофони вебкамер — щоб «бачити» чужий екран. 

Однак атаки через аудіоканал вже стають реальною загрозою. Наприклад, під час операції Dropmire у 2013 році США шпигували за союзниками в Європі, читаючи зашифровані факс-повідомлення через дроти, радіочастоти чи аудіоканал.