智能家居中邊緣AI優(yōu)勢(shì)

智能家居人機(jī)交互需要多模式方法

正如我們之前所討論的，針對(duì)智能手機(jī)和汽車(chē)應(yīng)用的基于邊緣AI的解決方案主要側(cè)重于攝像機(jī)視覺(jué)應(yīng)用。但是，在智能家居中，多模式人機(jī)交互界面是在連接設(shè)備的新時(shí)代增強(qiáng)用戶體驗(yàn)的關(guān)鍵要素。以機(jī)頂盒為例，此應(yīng)用將需要視頻AI，也許是如前所述的視頻增強(qiáng)形式。它還需要語(yǔ)音AI能夠通過(guò)語(yǔ)音命令來(lái)識(shí)別正在看電視的人，并相應(yīng)地配置體驗(yàn)。例如，讓選擇喜歡的節(jié)目變得更加容易。甚至可能需要視覺(jué)AI，并且需要帶有內(nèi)置攝像頭，以便遠(yuǎn)程與家庭成員聊天時(shí)提供增強(qiáng)而直觀的視頻會(huì)議體驗(yàn)。

理想的解決方案是以智能家居為中心的SoC（系統(tǒng)級(jí)芯片，System－on－a－Chip），它可以支持高性能視頻、語(yǔ)音和視覺(jué)處理以及集成的AI加速器。 Synaptics VS600 SoC系列就是這種解決方案的一個(gè)示例。這種方法不僅經(jīng)過(guò)優(yōu)化，可以滿足智能家居應(yīng)用對(duì)多模式AI性能的要求，而且還可以將所有這些功能集成到單個(gè)芯片中，從而使以消費(fèi)者市場(chǎng)價(jià)格出售的普通家用產(chǎn)品都可以使用。

這個(gè)需要的解決方案從一個(gè)SOC平臺(tái)開(kāi)始，該平臺(tái)集成了多種類(lèi)型的處理器引擎：CPU、NPU、GPU和ISP，以及與高性能相機(jī)和顯示器的掛鉤。這種架構(gòu)實(shí)現(xiàn)了高度安全、低成本推理和實(shí)時(shí)多模式性能的理想組合。Synaptics Edge AI系列是一系列SoC，每個(gè)SoC都高度針對(duì)其給定的消費(fèi)類(lèi)應(yīng)用。該系列中的每個(gè)SoC都集成了所需的處理內(nèi)核以及該應(yīng)用程序的適當(dāng)級(jí)別的集成AI性能。

完整的堆棧工具方法可簡(jiǎn)化AI開(kāi)發(fā)

如我們所見(jiàn)，成本／性能之間的權(quán)衡對(duì)于成功將邊緣AI擴(kuò)展到更多應(yīng)用至關(guān)重要。在競(jìng)爭(zhēng)激烈的消費(fèi)電子領(lǐng)域、上市時(shí)間和差異化也至關(guān)重要。為了應(yīng)對(duì)邊緣AI廣泛傳播的挑戰(zhàn)，需要采用全棧方法，其中包括將AI創(chuàng)新引入邊緣 AI SoC的必要開(kāi)發(fā)工具。

最重要的是，所需的工具集應(yīng)該與龐大且不斷增長(zhǎng)的AI開(kāi)發(fā)人員用戶社區(qū)兼容。例如，該工具包將使開(kāi)發(fā)人員能夠?qū)�入使用行業(yè)標(biāo)準(zhǔn)框架（例如TensorFlow，TensorFlow Lite，Caffe和ONNX）創(chuàng)建的模型。這使開(kāi)發(fā)人員能夠利用現(xiàn)有的AI創(chuàng)新，并使他們迅速而輕松地在目標(biāo)SoC上工作。

讓我們使用我們前面討論的個(gè)人家庭瑜伽教練應(yīng)用。該應(yīng)用所基于的AI模型將是人體姿勢(shì)估計(jì)模型，這是一種行業(yè)標(biāo)準(zhǔn)的概念，用于檢測(cè)用戶在攝像機(jī)視線中的相對(duì)骨骼位置。如果AI開(kāi)發(fā)人員自己使用行業(yè)標(biāo)準(zhǔn)工具（例如TensorFlow lite）創(chuàng)建的人體姿勢(shì)估計(jì)模型的實(shí)現(xiàn)，則他們將使用該工具包將其導(dǎo)入以在所需的SoC上使用。

當(dāng)開(kāi)發(fā)人員準(zhǔn)備就緒時(shí)，該工具應(yīng)使他們能夠針對(duì)將在其上運(yùn)行的所選處理器優(yōu)化其AI模型的性能。開(kāi)發(fā)人員可以選擇使用開(kāi)放框架，例如TensorFlow或TensorFlow Lite，但是在使用它們時(shí)要牢記目標(biāo)處理器的功能。或者他們可以再次使用特定于SoC的工具，例如Synaptics的SyNAP工具，該工具支持專(zhuān)門(mén)針對(duì)VS600 SoC中的處理器進(jìn)行優(yōu)化。在我們的示例中，開(kāi)發(fā)人員可以使用SyNAP優(yōu)化功能來(lái)配置其身體姿勢(shì)估計(jì)模型，例如，使其能夠以每秒30幀的速度在VS600 SoC上實(shí)時(shí)運(yùn)行。