谷歌今天寫下的解釋器上索利基于雷達(dá)的技術(shù)，船舶其內(nèi)部像素4智能手機(jī)。盡管以前已經(jīng)知道許多硬件細(xì)節(jié)，但該公司還是第一次拉開了Soli AI模型的帷幕，這些模型經(jīng)過(guò)訓(xùn)練可以以低延遲檢測(cè)和識(shí)別運(yùn)動(dòng)手勢(shì)。盡管還處于初期，Pixel 4和Pixel 4 XL是首款采用Soli的消費(fèi)類設(shè)備，但Google聲稱該技術(shù)可以在智能手表等設(shè)備上實(shí)現(xiàn)新形式的上下文和手勢(shì)識(shí)別，從而為更好地適應(yīng)用戶需求鋪平了道路。殘疾。

Pixel 4中的Soli模塊是Google的高級(jí)技術(shù)和項(xiàng)目(ATAP)小組與Pixel和Android產(chǎn)品團(tuán)隊(duì)之間的共同努力，其中包含60GHz雷達(dá)和天線接收器，它們具有組合的180度視野，可記錄位置信息。除了范圍和速度之類的信息。(在多次傳輸?shù)拇翱谏希瑢?duì)象位置的位移會(huì)引起時(shí)間偏移，該偏移表現(xiàn)為與對(duì)象速度成比例的多普勒頻率。)電磁波將信息反射回天線和定制濾波器(包括用于解決音頻振動(dòng)的濾波器)由音樂引起的噪聲)提高信噪比，同時(shí)衰減不必要的干擾，并區(qū)分噪聲和雜波的反射。

信號(hào)轉(zhuǎn)換被輸入到Soli的機(jī)器學(xué)習(xí)模型中，用于“亞毫米”手勢(shì)分類。谷歌認(rèn)為，開發(fā)它們需要克服幾個(gè)主要挑戰(zhàn)：

每個(gè)用戶甚至可以執(zhí)行多種簡(jiǎn)單的動(dòng)作，例如滑動(dòng)。

傳感器范圍內(nèi)的多余動(dòng)作有時(shí)看起來(lái)類似于手勢(shì)。

從傳感器的角度來(lái)看，當(dāng)手機(jī)移動(dòng)時(shí)，看起來(lái)整個(gè)世界都在移動(dòng)。

Soli背后的團(tuán)隊(duì)設(shè)計(jì)了一個(gè)系統(tǒng)，該系統(tǒng)包含使用從數(shù)千名Google志愿者那里記錄的數(shù)百萬(wàn)個(gè)手勢(shì)進(jìn)行訓(xùn)練的模型，并補(bǔ)充了數(shù)百小時(shí)的雷達(dá)記錄，其中包含來(lái)自其他Google志愿者的一般動(dòng)作。這些AI模型是使用Google的TensorFlow機(jī)器學(xué)習(xí)框架進(jìn)行訓(xùn)練的，經(jīng)過(guò)優(yōu)化后可以直接在Pixel 4的低功耗數(shù)字信號(hào)處理器上運(yùn)行，即使在主處理器掉電的情況下，它們也可以每秒追蹤18,000幀。