Bir araştırmacı ekip, akıllı telefon titreşimlerinden sohbet etmek için bir mikrodalga radar sensörüne başvurdu ve bu titreşimleri tanınabilir konuşmaya kopyalamak için yapay zeka ile entegre büyük ölçekli bir ses tanıma modelini uyarladı.
Olarak bilinen ortaya çıkan bir gözetim biçimi “Kablosuz Dokunma“bir cep telefonunun kulak alıcı tarafından üretilen küçük harfli titreşimlerden gelen konuşmaları uzaktan kodlama olasılığını araştırır.
Amacıyla Gizliliği Koruyun ABD’deki Penn State Ussity’den bir araştırmacı ekibi olan potansiyel kötü niyetli ajanlara karşı kullanıcıların Transkript oluşturmak mümkündür bir telefondan üç metre uzaklıktaki radar ölçümlerinden gelen telefon görüşmeleri.
Rağmen Doğruluk hala sınırlı – 10.000 kelimeye kadar bir kelime dağarcığı için yaklaşık% 60 – Sonuçlar gelecekteki gizlilik riskiyle ilgili önemli soruları gündeme getirmektedir.
Sonuçları çalışmak yakın zamanda yayınlanan bir makalede sunuldu. WISEC 2025 Bildirileri.
Çalışma, ekibin bir radar sensörü ve ses tanıma yazılımı kullandığı 2022 projesine dayanıyor. Uzaktan tanımlayın %83’e kadar hassasiyetle 10 kelime, harf ve önceden tanımlanmış sayılar.
“Cep telefonuyla konuştuğumuzda, Titreşimleri görmezden gelme eğilimindeyiz Bu, kulağın altyifalajından geçer ve tüm cihazı titreştirir ”diye açıklıyor Suryoday BasakPenn Eyaletinde Bilgisayar Bilimi Doktora Öğrencisi ve makalenin ilk yazarı, iletişim Üniversiteden.
“Aynı titreşimleri uzak radar kullanarak yakalarsak ve makine öğrenimi Söylendiğini anlamamıza yardımcı olmak, bağlamsal ipuçlarını kullanarak, Tüm konuşmaları belirlemeyi başardık. Neyin mümkün olduğunu fark ettiğimizde, halkın potansiyel risklerin farkında olmasına yardımcı olabiliriz ”diye ekliyor.
Basak ve danışmanı, Mahanth GowdaDoçent Bilgisayar Mühendisliği ve Makalenin ortak yazarı, kompakt, radar tabanlı cihazların potansiyelini keşfetmek için bir milimetre dalga radar sensörü kullandı, bu minyatür olabilir Pens gibi günlük nesnelere sığdırmak için.
Gibi milimetre dalgaları Bunlar, genellikle otonom arabalarda, hareket dedektörlerinde ve 5G ağlarında kullanılan cihazlarda bulunan 300 MHz ve 300 GHz (1 mm 1 mm dalga boyları) arasındaki frekans aralığında bir mikrodalga türüdür.
Araştırmacılar, deney sistemlerinin sadece araştırma amaçlı olduğunu ve önleyici bir şekilde geliştirildikötü niyetli ajanların ne yaratabileceğini öngörmek.
Çalışma sırasında, araştırmacılar daha sonra FısıldamakTanınabilir konuşma transkriptlerinde titreşimleri çözmek için yapay zeka ile beslenen açık kaynaklı bir konuşma tanıma modeli.
“Son üç yılda bir AI’nın yeteneklerinde büyük patlama Ve açık kaynaklı konuşma tanıma modellerinde, ”dedi Basak. Bu modelleri kullanabiliriz, ancak bunlar Konuşmayı temizlemek için en çok yönlendirilmiş Veya günlük bağlamlar, bu nedenle düşük kaliteli ve ‘gürültülü’ radar verilerini tanımak için bunları uyarlamamız gerekir. “
Gürültülü verileri, tüm modeli tekrar eğitmek zorunda kalmadan tanınabilir konuşmaya dönüştürmek için, araştırmacılar bir adaptasyon yöntemine başvurdular. düşük dereceli adaptasyonRadar verileri için modeli uzmanlaşmalarına izin veren Parametrelerin sadece% 1’ini eğitmek Yapmak Fısıldamak.
Titreşimleri kaydetmek için ekip bir milimetre dalga radar sensörü konumlandırdı Telefondan birkaç metre uzaktakonuşma sırasında yüzeyde ince titreşimlerin yakalanması, kulak alıcı tarafından çoğaltıldı.
Verileri analiz etmek için, Radar tarafından yakalanan sinyali modelin özel sürümüne tanıttılar. Fısıldamak– % 60’a kadar doğruluk elde etmek. Araştırmacılara göre, transkripsiyonun doğruluğu geliştirilebilir Bağlam tabanlı manuel düzeltmelerle, belirli kelimeleri veya ifadeleri ayarlama, konuşmanın önceden bilgi sahibi olduğunda.
“Sonuç Konuşma Transkriptlerizaten temsil eden bazı hataların beklentisiyle önemli bir gelişme Sadece birkaç kelime üreten 2022 versiyonu ile ilgili olarak, ”dedi Gowda. Ancak kısmi yazışmaları yakalayabilmek bile Anahtar Kelimelerbir güvenlik bağlamında yararlı olabilir. “
Araştırmacılar, modelin yeteneklerini karşılaştırdı dudak okuma: Sözlü kelimelerin sadece% 30 ila% 40’ını yakalamasına izin verse de, onu kullanan birçok kişi Decipher için bağlamsal parçalara başvurun bir sohbete katılmak için yeterli.
“Dudak okuyucuların konuşmaları sınırlı bilgilerle yorumlayabileceği gibi, modelimizin ayrılması, bağlamsal bilgilerle birleştiğinde bize izin verebilir bir telefon görüşmesinin kısımlarını çıkarın Birkaç metre uzaklıkta, ”dedi Basak.