萊迪思（LATTICE）Nexus FPGA、sensAI解決方案集合就是針對類似的應(yīng)用所開發(fā)的計算機(jī)視覺和傳感器融合應(yīng)用的平臺。

11月18日，萊迪思宣布了低功耗、AI/ML解決方案的最新路線圖，Lattice Nexus FPGA芯片結(jié)合Lattice sensAI解決方案集合，可以幫助PC等OEM廠商開發(fā)智能、實時在線、具有低功耗和硬件加速AI功能的設(shè)備，這些設(shè)備還能現(xiàn)場進(jìn)行升級，支持未來更多的AI算法。

萊迪思市場和業(yè)務(wù)發(fā)展副總裁Matt Dobrodziej表示：“基于視覺、聲音和其他傳感器的AI應(yīng)用將革新客戶端計算體驗。我們的sensAI支持各類網(wǎng)絡(luò)邊緣AI解決方案，賦予客戶端設(shè)備情境感知能力，讓它們知道自身在何時、何地、以何種方式被使用。我們的Nexus FPGA則以行業(yè)領(lǐng)先的低功耗來實現(xiàn)這一功能?！?/p>

與使用CPU來驅(qū)動AI應(yīng)用的設(shè)備相比，采用sensAI開發(fā)，并在萊迪思FPGA上運(yùn)行的AI計算設(shè)備的電池使用時間延長了28%。sensAI還支持現(xiàn)場軟件更新，從而保持AI算法的演進(jìn)，還能讓OEM廠商靈活選擇不同的傳感器和SoC技術(shù)來適配他們的設(shè)備。

萊迪思正與領(lǐng)先的AI生態(tài)系統(tǒng)伙伴合作，制定萊迪思客戶端計算AI體驗的發(fā)展路線圖。

Mirametrix副總裁Stephen Morganstein表示：“我們的Glance by Mirametrix注意力感應(yīng)軟件可以捕捉用戶的面部、眼睛和凝視動作，從而了解用戶的意識和注意力。這項獨(dú)特的技術(shù)開發(fā)的智能設(shè)備能提供更自然和沉浸式的用戶體驗和設(shè)備交互。萊迪思的sensAI解決方案集合和低功耗FPGA可幫助開發(fā)人員實現(xiàn)新穎的AI功能，提高設(shè)備的電池壽命。”

sensAI解決方案集合的最新版本（v4.1）現(xiàn)已發(fā)布，支持萊迪思基于AI的應(yīng)用路線圖，其增強(qiáng)特性和新特性包括：

• 客戶端計算AI體驗參考設(shè)計
  • 用戶檢測：用戶接近或離開設(shè)備時會自動啟動或關(guān)閉客戶端設(shè)備
  • 注意力追蹤：當(dāng)用戶的注意力不在屏幕上時，降低設(shè)備的屏幕亮度，節(jié)約電量，延長使用時間
  • 面部取景：在視頻會議應(yīng)用中提升視頻體驗
  • 旁邊者檢測：檢測站在設(shè)備后面潛在的窺視者，模糊屏幕以保障數(shù)據(jù)隱私
• 更多應(yīng)用支持——sensAI 4.1版本在性能和準(zhǔn)確度方面的提升有助于拓展其目標(biāo)應(yīng)用，包括自動化工業(yè)系統(tǒng)中使用的高精度目標(biāo)檢測和瑕疵檢測等應(yīng)用。該解決方案集合擁有全新硬件平臺，包括板載圖像傳感器、兩個I2S麥克風(fēng)和用于添加更多傳感器的擴(kuò)展連接器，助力基于語音和視覺的機(jī)器學(xué)習(xí)應(yīng)用的開發(fā)。

• 易于使用的工具——sensAI還更新了神經(jīng)網(wǎng)絡(luò)編譯器，支持Lattice sensAI Studio，這是一款基于GUI的工具，擁有AI模型庫，經(jīng)過配置和訓(xùn)練可適用于各類主流應(yīng)用場景。sensAI Studio現(xiàn)支持AutoML功能，能根據(jù)應(yīng)用和數(shù)據(jù)集目標(biāo)來創(chuàng)建機(jī)器學(xué)習(xí)模塊。一些基于Mobilenet機(jī)器學(xué)習(xí)推理訓(xùn)練平臺的模型專為最新的Nexus系列產(chǎn)品——Lattice CertusPro-NX進(jìn)行了優(yōu)化。sensAI還兼容其他廣泛使用的機(jī)器學(xué)習(xí)平臺，包括最新版本的Caffe、Keras、TensorFlow和TensorFlow Lite。

songjy