視覺處理平臺VPU發(fā)展趨勢

鄭小龍

摘要：隨著物聯(lián)網(wǎng)智能化需求的出現(xiàn)，視覺感知成為一種至關(guān)重要的融合技術(shù)，其核心處理平臺也在發(fā)生著深刻的變革。視覺處理平臺（VPU）的推出促進(jìn)視覺處理技術(shù)的創(chuàng)新發(fā)展，Movidius公司以獨(dú)特的專用視覺處理VPU芯片，致力于拓展面向廣闊視覺感知領(lǐng)域的應(yīng)用市場，展現(xiàn)出的高集成、高性能以及小型化的特色，代表著VPU未來的發(fā)展方向。

關(guān)鍵詞：視覺處理；VPU；3D感知；智能相機(jī)

DOI：10.3969/j.issn.1005-5517.2016.1.005

視覺處理推進(jìn)處理器平臺發(fā)展

視覺處理（Vision Processing）技術(shù)是一個既傳統(tǒng)而又新鮮，需要融入各種創(chuàng)新因素的綜合影像處理技術(shù)。視覺處理依賴于通用處理器平臺的性能，最初基于計算機(jī)軟件算法實(shí)施處理，之后借助高速數(shù)字信號處理器（DSP）完成嵌入式實(shí)時應(yīng)用。隨著DSP性能大幅提高和浮點(diǎn)運(yùn)算的出現(xiàn)，視覺實(shí)時處理技術(shù)和應(yīng)用有了長足的進(jìn)步。但是，視覺處理需要很多特別處理，若純粹采用通用高速處理芯片和算法軟件還是難以適應(yīng)不斷提高的要求，因此需要采取更多更新且有針對性的處理手段。

隨著多種高速高性能處理器技術(shù)的發(fā)展，視覺處理有了更多的可選平臺。可編程邏輯陣列（FPGA）基于硬件可編程方式進(jìn)行處理；嵌入式應(yīng)用處理器（AP）可集成多種專用協(xié)處理器輔助處理；具有專用IP的單片系統(tǒng)（SoC）則可以直接將硬件處理單元植入系統(tǒng)平臺。相比之下，通用DSP平臺的針對性有所局限，需要通過多核集成，或多片陣列來提高性能。然而，在視覺處理新的市場環(huán)境下，對性能、功耗、價格和尺寸的更高需求對處理器提出了更加嚴(yán)格的要求，因此，視覺處理平臺VPU（Vision Processing Unit，簡稱VPU）成為一種全新的核心引擎。由于VPU中集成了多種專門進(jìn)行視覺處理的硬件結(jié)構(gòu)，因此在處理上可以有很大的超越，其綜合性能可大幅度提升到每瓦性能超過600GFLOPS（浮點(diǎn)運(yùn)算單位），是其它處理器的二至三倍，而價格僅為幾分之一。

視覺處理器平臺的特色及應(yīng)用

VPU針對視覺處理應(yīng)用而設(shè)計，在性能、功耗和功能性方面都有特別的強(qiáng)化，使之更貼近于實(shí)際的應(yīng)用需求，其設(shè)計兼顧到多種用途，專門為視覺處理進(jìn)行硬件系統(tǒng)的優(yōu)化。其實(shí)VPU也是一個SoC，內(nèi)部集成有多個主控RISC的CPU、許多硬件加速器單元和矢量處理器陣列，專門為視覺海量像素設(shè)計的高性能影像信號處理器（ISP），以及豐富的高速外圍接口。在保證強(qiáng)大性能和功能的前提下、VPU采用更先進(jìn)的集成電路工藝，大大縮小了芯片的尺寸，并結(jié)合有效的技術(shù)手段，降低各個運(yùn)算單元的功耗。

當(dāng)前行業(yè)內(nèi)處于領(lǐng)先地位的VPU平臺是Movidius公司推出的小型化、低功耗架構(gòu)，本人近期在北京與該公司高級副總裁Farshid Sabet先生有過交流、通過正在進(jìn)行的產(chǎn)品路演（Roadshow），對于Myriad系列VPU平臺有了直觀的感受。這是一款可以用于3D感知及掃描建模的芯片，可以支持室內(nèi)導(dǎo)航、360度全景視頻處理等機(jī)器視覺應(yīng)用，其視覺處理性能超出其它處理器平臺十倍，功耗則低一個數(shù)量級，而尺寸和價格都僅為五分之一，如圖1所示為Myriad芯片和硬件參考設(shè)計。這款VPU的出現(xiàn)，無疑向新興的智能相機(jī)市場注入了活力。

Myriad的第二代VPU采用全新的體系架構(gòu)，提升性能達(dá)到二十倍、增強(qiáng)視覺處理能力使之成為新的VPU標(biāo)桿，同時支持六個60幀全高清視頻信號輸入，而功耗在1.2瓦以內(nèi)，芯片采用28納米工藝制造。新平臺的突出表現(xiàn)在于實(shí)現(xiàn)虛擬現(xiàn)實(shí)、室內(nèi)定位和物體識別的應(yīng)用，是機(jī)器人視覺應(yīng)用的理想選擇。通過該芯片超小型的尺寸、可以應(yīng)用到智能工業(yè)相機(jī)中和各種智能終端，也可用在紐扣式智能相機(jī)上，或在可穿戴智能相機(jī)上擴(kuò)展使用。

VPU為視覺應(yīng)用提供了一個強(qiáng)大的平臺，但更多的開發(fā)工作是在軟件上，基于VPU的視覺應(yīng)用系統(tǒng)開發(fā)可以充分利用片上的硬件單元及相關(guān)的軟件資源。如圖2所示為包含工具、支持庫及框架的完整VPU軟件開發(fā)套件（SDK），以往視頻處理器中涉及視覺處理的單元得到了增強(qiáng)，如核心視覺處理單元、線性代數(shù)運(yùn)算矩陣，還有前端影像處理單元，不僅包含ISP處理，還有ISP仿真，并支持相機(jī)調(diào)試工具。圖形處理能力的提升表現(xiàn)在支持圖形檢測API，為便于多核異構(gòu)芯片開發(fā)而支持OpenCL。由于在視覺應(yīng)用中，與高敏感度和超高像素的傳感器的接駁尤為重要，因此專門有傳感器支持接口單元。另外VPU所特有的工具單元也提供視覺調(diào)試的全面支持。VPU中的主控制器、BSP、HDK等通用單元以開放為主，便于客戶進(jìn)行更多應(yīng)用開發(fā)。

視覺處理器的市場前景展望

作為一個行業(yè)的平臺領(lǐng)先者需要有足夠的積累和不懈的進(jìn)取，當(dāng)然還要有強(qiáng)大的財力和物力的支持，VPU平臺的創(chuàng)建和發(fā)展也絕不輕松、對此Sabet先生暢談了Movidius的發(fā)展歷程。這確實(shí)是一家頗具傳奇色彩的創(chuàng)新型公司，十年來只專注做一件事，就是創(chuàng)建和完善VPU平臺。我驚奇地得知Movidius最早的成立地竟然是愛爾蘭的都柏林，而后又在羅馬尼亞，再到美國的硅谷建立研發(fā)團(tuán)隊。公司創(chuàng)始人都堪稱半導(dǎo)體和處理器行業(yè)的元老，公司并設(shè)立技術(shù)指導(dǎo)委員會，確立公司的技術(shù)路線和VPU平臺發(fā)展總體規(guī)劃。在Movidius核心管理層中，我聽到了不少熟悉的名字，其中就有T1及其他知名公司資深的高管和專家。公司員工目前雖未過百人，但研發(fā)人員就占了九成，其中五分之一負(fù)責(zé)VPU芯片硬件設(shè)計，而其余從事VPU上軟件構(gòu)建，由此可見VPU應(yīng)用在很大程度上依賴于軟件。

Movidius選擇VPU作為公司的立基之時，物聯(lián)網(wǎng)尚在起步，其智能化必將帶來視覺處理的蓬勃發(fā)展。盡管研發(fā)處理器平臺必然投入巨大、周期漫長，投資產(chǎn)生回報更要有耐性，但創(chuàng)新才是硬道理，在VPU未為大牌公司所關(guān)注，也就沒有被壟斷的風(fēng)險，Movidius抓住了這個機(jī)遇，潛心數(shù)年打造出名為Myriad的系列VPU平臺。據(jù)權(quán)威機(jī)構(gòu)預(yù)測，全球物聯(lián)網(wǎng)設(shè)備數(shù)量將達(dá)到500億之多，若十分之一有視覺需求已極為可觀，屆時新的視覺處理器之爭將展開。Movidius未雨綢繆，已經(jīng)開始了新興市場的布局。如圖3所示為VPU面向物聯(lián)網(wǎng)的視覺感知應(yīng)用方向，其中無人機(jī)的應(yīng)用將包含傳感和防撞，以及盤旋定位和像素映射：VR和VA相關(guān)的手勢和姿態(tài)、人眼跟蹤、3D觸控：服務(wù)機(jī)器人的3D映像及自動導(dǎo)向：安防監(jiān)控的前端實(shí)時視頻智能分析和自動識別。在此基礎(chǔ)上可不斷擴(kuò)展視覺相關(guān)的應(yīng)用。

Movidius在視覺處理平臺發(fā)展中的優(yōu)勢在業(yè)界引入矚目，使得Google Project Tango選擇后作為合作伙伴，并將第一什Myriad VPU引入其3D視覺手機(jī)和平板電腦產(chǎn)品，而Myriad_代未來將為智能機(jī)器人、可穿戴設(shè)備等嵌入式物聯(lián)網(wǎng)設(shè)備提視覺感知支持。Movidius慎重選擇具有發(fā)展?jié)摿Φ暮献骰锇?，并全力支持他們使用其芯片以獲得市場成功。中國是Movidiu極為看重的市場，業(yè)已投入資源，以VPU支持中國企業(yè)在視覺感知領(lǐng)域的創(chuàng)新和拓展。期待VPU能在中國新興產(chǎn)業(yè)的發(fā)展中獲得更加廣闊的市場空間，更好地服務(wù)于中國制造2025的宏伺戰(zhàn)略規(guī)劃。

參考文獻(xiàn)：

[1]王瑩，葉雷物聯(lián)網(wǎng)趨勢下的安防監(jiān)控發(fā)展，電子產(chǎn)品世界，2015（6）

[2]迎九.GEO向消費(fèi)和工業(yè)市場推出圖像處理引擎，電子產(chǎn)品世界，2014（11）

[3]李星字.飛思卡爾i.MX6應(yīng)用處理器助力機(jī)器視覺，電子產(chǎn)品世界，2014（11）