智能家居創(chuàng)建和采用邊緣AI解決方案的令人信服的理由是什么?
智能家居人機(jī)交互需要多模式方法
正如我們之前所討論的,針對(duì)智能手機(jī)和汽車應(yīng)用的基于邊緣AI的解決方案主要側(cè)重于攝像機(jī)視覺(jué)應(yīng)用。但是,在智能家居中,多模式人機(jī)交互界面是在連接設(shè)備的新時(shí)代增強(qiáng)用戶體驗(yàn)的關(guān)鍵要素。以機(jī)頂盒為例,此應(yīng)用將需要視頻AI,也許是如前所述的視頻增強(qiáng)形式。它還需要語(yǔ)音AI能夠通過(guò)語(yǔ)音命令來(lái)識(shí)別正在看電視的人,并相應(yīng)地配置體驗(yàn)。例如,讓選擇喜歡的節(jié)目變得更加容易。甚至可能需要視覺(jué)AI,并且需要帶有內(nèi)置攝像頭,以便遠(yuǎn)程與家庭成員聊天時(shí)提供增強(qiáng)而直觀的視頻會(huì)議體驗(yàn)。
理想的解決方案是以智能家居為中心的SoC(系統(tǒng)級(jí)芯片,System-on-a-Chip),它可以支持高性能視頻、語(yǔ)音和視覺(jué)處理以及集成的AI加速器。 Synaptics VS600 SoC系列就是這種解決方案的一個(gè)示例。這種方法不僅經(jīng)過(guò)優(yōu)化,可以滿足智能家居應(yīng)用對(duì)多模式AI性能的要求,而且還可以將所有這些功能集成到單個(gè)芯片中,從而使以消費(fèi)者市場(chǎng)價(jià)格出售的普通家用產(chǎn)品都可以使用。
這個(gè)需要的解決方案從一個(gè)SOC平臺(tái)開(kāi)始,該平臺(tái)集成了多種類型的處理器引擎:CPU、NPU、GPU和ISP,以及與高性能相機(jī)和顯示器的掛鉤。這種架構(gòu)實(shí)現(xiàn)了高度安全、低成本推理和實(shí)時(shí)多模式性能的理想組合。Synaptics Edge AI系列是一系列SoC,每個(gè)SoC都高度針對(duì)其給定的消費(fèi)類應(yīng)用。該系列中的每個(gè)SoC都集成了所需的處理內(nèi)核以及該應(yīng)用程序的適當(dāng)級(jí)別的集成AI性能。
完整的堆棧工具方法可簡(jiǎn)化AI開(kāi)發(fā)
如我們所見(jiàn),成本/性能之間的權(quán)衡對(duì)于成功將邊緣AI擴(kuò)展到更多應(yīng)用至關(guān)重要。在競(jìng)爭(zhēng)激烈的消費(fèi)電子領(lǐng)域、上市時(shí)間和差異化也至關(guān)重要。為了應(yīng)對(duì)邊緣AI廣泛傳播的挑戰(zhàn),需要采用全棧方法,其中包括將AI創(chuàng)新引入邊緣 AI SoC的必要開(kāi)發(fā)工具。
最重要的是,所需的工具集應(yīng)該與龐大且不斷增長(zhǎng)的AI開(kāi)發(fā)人員用戶社區(qū)兼容。例如,該工具包將使開(kāi)發(fā)人員能夠?qū)胧褂眯袠I(yè)標(biāo)準(zhǔn)框架(例如TensorFlow,TensorFlow Lite,Caffe和ONNX)創(chuàng)建的模型。這使開(kāi)發(fā)人員能夠利用現(xiàn)有的AI創(chuàng)新,并使他們迅速而輕松地在目標(biāo)SoC上工作。
讓我們使用我們前面討論的個(gè)人家庭瑜伽教練應(yīng)用。該應(yīng)用所基于的AI模型將是人體姿勢(shì)估計(jì)模型,這是一種行業(yè)標(biāo)準(zhǔn)的概念,用于檢測(cè)用戶在攝像機(jī)視線中的相對(duì)骨骼位置。如果AI開(kāi)發(fā)人員自己使用行業(yè)標(biāo)準(zhǔn)工具(例如TensorFlow lite)創(chuàng)建的人體姿勢(shì)估計(jì)模型的實(shí)現(xiàn),則他們將使用該工具包將其導(dǎo)入以在所需的SoC上使用。
當(dāng)開(kāi)發(fā)人員準(zhǔn)備就緒時(shí),該工具應(yīng)使他們能夠針對(duì)將在其上運(yùn)行的所選處理器優(yōu)化其AI模型的性能。開(kāi)發(fā)人員可以選擇使用開(kāi)放框架,例如TensorFlow或TensorFlow Lite,但是在使用它們時(shí)要牢記目標(biāo)處理器的功能;蛘咚麄兛梢栽俅问褂锰囟ㄓ赟oC的工具,例如Synaptics的SyNAP工具,該工具支持專門針對(duì)VS600 SoC中的處理器進(jìn)行優(yōu)化。在我們的示例中,開(kāi)發(fā)人員可以使用SyNAP優(yōu)化功能來(lái)配置其身體姿勢(shì)估計(jì)模型,例如,使其能夠以每秒30幀的速度在VS600 SoC上實(shí)時(shí)運(yùn)行。

發(fā)表評(píng)論
請(qǐng)輸入評(píng)論內(nèi)容...
請(qǐng)輸入評(píng)論/評(píng)論長(zhǎng)度6~500個(gè)字
最新活動(dòng)更多
-
免費(fèi)參會(huì)立即報(bào)名>> 7月30日- 8月1日 2025全數(shù)會(huì)工業(yè)芯片與傳感儀表展
-
精彩回顧立即查看>> 【評(píng)選啟動(dòng)】維科杯·OFweek 2025(第十屆)人工智能行業(yè)年度評(píng)選
-
精彩回顧立即查看>> 【深圳 IEAE】2025 消費(fèi)新場(chǎng)景創(chuàng)新與實(shí)踐論壇
-
精彩回顧立即查看>> 燧石技術(shù),賦光智慧,超越感知
-
精彩回顧立即查看>> 【線下會(huì)議】OFweek 2024(第九屆)物聯(lián)網(wǎng)產(chǎn)業(yè)大會(huì)
-
精彩回顧立即查看>> 2024(第五屆)全球數(shù)字經(jīng)濟(jì)產(chǎn)業(yè)大會(huì)暨展覽會(huì)
- 1 全國(guó)先進(jìn)制造業(yè)集群全景-廣東篇
- 2 雷軍一句話,京津冀汽車產(chǎn)業(yè)鏈沸騰了
- 3 上汽大眾南京工廠關(guān)閉,燃油車廠正在消失
- 4 142.4億!雷克薩斯上海超級(jí)工廠今動(dòng)工
- 5 端到端為何在自動(dòng)駕駛技術(shù)中崛起?
- 6 Tesla Network 在中國(guó):技術(shù)壁壘與本土化困境下的破局之路
- 7 特斯拉無(wú)人車,畫(huà)了這么久的餅,終于可以吃了
- 8 關(guān)于開(kāi)展“清朗·優(yōu)化營(yíng)商網(wǎng)絡(luò)環(huán)境——整治涉企網(wǎng)絡(luò)‘黑嘴’”專項(xiàng)行動(dòng)的公告
- 9 【行業(yè)深度研究】成都霸榜新一線城市榜首11年,到底靠什么?
- 10 武漢229家企業(yè)的AI狂飆,讓北上廣都慌了