亞馬遜Alexa改造 可識別手語并給出屏幕文本反饋

原標(biāo)題：亞馬遜Alexa改造 可識別手語并給出屏幕文本反饋

語音識別技術(shù)已經(jīng)在智能手機(jī)、智能家居、以及一些新奇的小工具上得到了普遍的使用，但是對于那些無法正常通過語音進(jìn)行交互的殘障人士來說，難道就沒有辦法與之交互了嗎？好消息是，軟件開發(fā)者 Abhishek Singh，剛剛演示了一款能夠理解手語手勢的 MOD —— 通過攝像頭的捕捉和深度學(xué)習(xí)，讓亞馬遜 Alexa 也能夠?qū)κ终Z手勢作出反饋。

這套系統(tǒng)的組成很是簡單，充分利用了筆記本電腦上的網(wǎng)絡(luò)攝像頭、現(xiàn)成的亞馬遜 Echo 智能揚(yáng)聲器、以及一些深度學(xué)習(xí)技術(shù)。它能夠解碼 Singh 的手勢，然后用語音 + 屏幕文本來回答查詢。

Singh 在接受 TheVerge 采訪時表示，后端用到了谷歌的 FensorFlow（特別是 TensorFlow.js）來提升實(shí)際使用體驗(yàn)。由于無法找到線上手語數(shù)據(jù)集，他必須自建一組基本信號，并對軟件展開訓(xùn)練。

Making Amazon Alexa respond to Sign Language using AI（ via ）

幾天前，亞馬遜推出了新版 Echo Show，可以利用設(shè)備上集成的觸屏進(jìn)行命令輸入，以便失聲者與之交互。其建立在一個名為 Alexa Captioning 的現(xiàn)有功能基礎(chǔ)上，可在兼容設(shè)備的屏幕上顯示響應(yīng)。

盡管 Singh 的演示只是一個概念驗(yàn)證，但他已計(jì)劃將代碼開源、并發(fā)表一篇博客文章來概述自己的工作。Singh 表示，任何其它配備了攝像頭和屏幕的智能設(shè)備廠商，都該立即著手這方面的工作。

關(guān)鍵詞： 亞馬遜 攝像頭 手語