KAIST團(tuán)隊(duì)采用了一項(xiàng)新技術(shù)“敲門器”，該技術(shù)可以通過(guò)用智能手機(jī)敲擊對(duì)象來(lái)識(shí)別對(duì)象并執(zhí)行動(dòng)作。由機(jī)器學(xué)習(xí)的聲音，振動(dòng)和其他反應(yīng)支持的軟件將執(zhí)行用戶的指示。

Knocker與現(xiàn)有技術(shù)的區(qū)別在于聲音和運(yùn)動(dòng)的傳感器融合。以前，對(duì)象識(shí)別要么使用帶有攝像頭的計(jì)算機(jī)視覺技術(shù)，要么使用諸如RFID(射頻識(shí)別)標(biāo)簽的硬件。這些解決方案都有其局限性。對(duì)于計(jì)算機(jī)視覺技術(shù)，用戶需要為每個(gè)項(xiàng)目拍照。更糟糕的是，該技術(shù)在光線不足的情況下無(wú)法很好地工作。使用硬件會(huì)導(dǎo)致額外的成本和人工負(fù)擔(dān)。

另一方面，即使在黑暗環(huán)境中，敲門器也可以僅使用智能手機(jī)識(shí)別物體，而無(wú)需任何專用硬件或使用相機(jī)。敲門器利用智能手機(jī)的內(nèi)置傳感器(例如麥克風(fēng)，加速計(jì)和陀螺儀)來(lái)捕獲當(dāng)智能手機(jī)撞擊物體時(shí)產(chǎn)生的一組獨(dú)特的響應(yīng)。機(jī)器學(xué)習(xí)用于分析這些響應(yīng)以及對(duì)對(duì)象進(jìn)行分類和識(shí)別。

計(jì)算學(xué)院的李成柱教授領(lǐng)導(dǎo)的研究小組證實(shí)，可通過(guò)使用23種日常物品(例如書籍，筆記本電腦，水壺和自行車)來(lái)實(shí)現(xiàn)Knocker技術(shù)的適用性。在嘈雜的環(huán)境中，例如繁忙的咖啡館或路邊，它可以達(dá)到83%的識(shí)別精度。在安靜的室內(nèi)環(huán)境中，精度提高到98%。

該團(tuán)隊(duì)相信Knocker將開啟對(duì)象交互的新范例。例如，通過(guò)敲一個(gè)空的水瓶，智能手機(jī)可以從商家應(yīng)用程序自動(dòng)訂購(gòu)新的水瓶。與物聯(lián)網(wǎng)設(shè)備集成后，在睡覺前敲床床頭板可能會(huì)關(guān)燈并發(fā)出警報(bào)。該團(tuán)隊(duì)在上個(gè)月于倫敦舉行的2019 ACM普及與普適計(jì)算國(guó)際聯(lián)合會(huì)議(UbiComp 2019)上提出的論文中，建議并實(shí)施了15個(gè)應(yīng)用案例。

Lee Sung-Ju教授說(shuō)：“這項(xiàng)新技術(shù)不需要任何專門的傳感器或硬件。它僅使用智能手機(jī)上的內(nèi)置傳感器并利用了機(jī)器學(xué)習(xí)的功能。這是日常智能手機(jī)用戶可以立即使用的軟件解決方案從。。得到好處。” 他繼續(xù)說(shuō)：“這項(xiàng)技術(shù)使用戶可以方便地與自己喜歡的對(duì)象進(jìn)行交互。”