程博文,楊秀芳
(中國電建集團(tuán)西北勘測設(shè)計研究院有限公司,陜西 西安 710065)
BIM(Building Information Modeling)技術(shù)是一種應(yīng)用于工程設(shè)計、建造、管理的數(shù)據(jù)化工具,通過對建筑的數(shù)據(jù)化、信息化模型整合,在項目策劃、運行和維護(hù)的全生命周期過程中進(jìn)行共享和傳遞,使工程技術(shù)人員對各種建筑信息作出正確理解和高效應(yīng)對,為設(shè)計團(tuán)隊以及包括建筑、運營單位在內(nèi)的各方建設(shè)主體提供協(xié)同工作的基礎(chǔ),在提高生產(chǎn)效率、節(jié)約成本和縮短工期方面發(fā)揮重要作用,目前在市場上經(jīng)常使用的BIM設(shè)計工具為歐特克的Revit和達(dá)索的CATIA[1-2]。
混合現(xiàn)實技術(shù)(MR)全稱為Mediated Reality,是由史蒂夫·曼恩(Steve Mann)提出,最早在20世紀(jì)80年代開始初步探索,是虛擬現(xiàn)實技術(shù)的進(jìn)一步發(fā)展,由于軟硬件的限制,混合現(xiàn)實技術(shù)在近幾年才得到蓬勃發(fā)展,該技術(shù)通過在虛擬環(huán)境中引入現(xiàn)實場景信息,在虛擬世界、現(xiàn)實世界和用戶之間搭起一個交互反饋的信息回路,以增強用戶體驗的真實感,技術(shù)的常見載體為智能眼鏡。目前市場上的常用的智能眼鏡是微軟的Microsoft HoloLens MR頭顯,HoloLens具備內(nèi)置電腦和電源,支持目光、手勢、語音等人機交互[3-4]。
根據(jù)《電力企業(yè)應(yīng)急能力建設(shè)評估規(guī)范》要求,電力建設(shè)企業(yè)應(yīng)急能力建設(shè)應(yīng)圍繞預(yù)防與應(yīng)急準(zhǔn)備、監(jiān)測與預(yù)警、應(yīng)急處置與救援、事后恢復(fù)與重建四個方面開展。根據(jù)電力建設(shè)工程項目的施工特點、范圍,制定應(yīng)急預(yù)案,利用虛擬現(xiàn)實技術(shù)進(jìn)行應(yīng)急培訓(xùn)與演練[5],能夠達(dá)到改進(jìn)和指導(dǎo)工程建設(shè)過程中的安全生產(chǎn),達(dá)到減少人員傷亡和避免經(jīng)濟(jì)損失,增強企業(yè)應(yīng)急能力建設(shè)的目的。
系統(tǒng)開發(fā)在win7和win10環(huán)境下,開發(fā)工具采用Visual C++2017,開發(fā)語言為C++,開發(fā)將以ARToolKit工具包為基礎(chǔ),能夠?qū)崿F(xiàn)視頻圖像的采集、攝像機跟蹤、標(biāo)定等工作。將BIM模型轉(zhuǎn)換為ARML格式,利用OpenARML開源代碼調(diào)用ARML模型,通過標(biāo)識識別計算獲得各種轉(zhuǎn)換矩陣,最后通過變換實現(xiàn)虛實的無縫結(jié)合,實現(xiàn)了BIM技術(shù)與MR技術(shù)的深度融合,能夠?qū)崿F(xiàn)對復(fù)雜危險工作的虛擬操作與培訓(xùn),在實際操作時還能實現(xiàn)實時專家遠(yuǎn)程指導(dǎo),協(xié)助操作人員解決突發(fā)問題,對BIM+MR技術(shù)在電力建設(shè)安全應(yīng)急方面進(jìn)行了深入的研究和探索應(yīng)用。
系統(tǒng)開發(fā)內(nèi)容為四大模塊,分別為:設(shè)備檢修、運維巡檢、設(shè)備使用教學(xué)、遠(yuǎn)程指導(dǎo),系統(tǒng)界面見圖1。
1)設(shè)備檢修。
根據(jù)現(xiàn)場實際設(shè)備檢修的流程進(jìn)行建模與開發(fā),并將檢修過程精確定位到設(shè)備實體上,能夠讓使用者在現(xiàn)實操作中可以看到當(dāng)前檢修設(shè)備的虛擬的操作流程與提示,可以很大程度的提高檢修效率,避免誤操作。
2)運維巡檢。
在實際運維巡檢過程中,系統(tǒng)可以根據(jù)巡檢人當(dāng)前觀察的設(shè)備提供該設(shè)備的信息及實時的監(jiān)測數(shù)據(jù)并且可以手動調(diào)取以前的數(shù)據(jù)。
3)設(shè)備使用教學(xué)。
在使用MR安全應(yīng)急管理系統(tǒng)時,開啟設(shè)備使用教學(xué)模塊后,操作人員頭戴MR智能眼鏡注視到的設(shè)備能夠被系統(tǒng)自動識別,并彈出設(shè)備操作和運維檢修的教學(xué)視頻。
4)遠(yuǎn)程指導(dǎo)。
遠(yuǎn)程指導(dǎo)模塊可以實現(xiàn)現(xiàn)場操作人員與場外專家的語音和視頻連接,場外專家可以實時看到現(xiàn)場操作人員的視野,并可以為現(xiàn)場操作人員提供標(biāo)注、語音和文件的指導(dǎo)。
MR智能眼鏡啟動時會自動掃描周邊環(huán)境,快速生成周邊的三維環(huán)境模型,從而實現(xiàn)現(xiàn)實場景加電力設(shè)備識別物與三維環(huán)境模型加電力設(shè)備BIM模型的精確疊加,這種疊加能夠在MR安全應(yīng)急管理系統(tǒng)中實現(xiàn)電力設(shè)備BIM模型在現(xiàn)實場景中的精確定位。
MR智能眼鏡支持與PC端和移動端等設(shè)備間相互傳輸圖像、音頻、文件,也可以接收其他平臺及云端的數(shù)據(jù),并將文件和數(shù)據(jù)呈現(xiàn)在智能眼鏡的屏幕中。
使用者在使用MR智能眼鏡時,智能眼鏡可以迅速識別使用者的眼神、手勢和聲音,并且程序會快速反饋,使得操作者能夠獲得良好的互動體驗。
BIM模型及其信息能夠?qū)隡R安全應(yīng)急管理系統(tǒng),導(dǎo)入的模型保留了原本BIM軟件中的結(jié)構(gòu)樹和信息,在MR安全應(yīng)急管理系統(tǒng)中,結(jié)構(gòu)樹可以使操作者能夠和模型上的局部部件進(jìn)行互動并查看其中的信息。
以開關(guān)柜的檢修為例子,在MR安全應(yīng)急管理系統(tǒng)中,將開關(guān)柜的BIM模型通過MR智能眼鏡顯示,并且與現(xiàn)實場景中的開關(guān)柜疊加,MR智能眼鏡掃描開關(guān)柜,可直接顯示開關(guān)柜內(nèi)部結(jié)構(gòu)、線路和電流流向,通過云端獲取設(shè)備監(jiān)測信息,在MR智能眼鏡中顯示開關(guān)柜內(nèi)部設(shè)備實時運行狀態(tài),自動標(biāo)記有故障的部件(見圖2),點擊電子手冊可以彈出相應(yīng)部件拆裝的教學(xué)視頻,在現(xiàn)場操作檢修時系統(tǒng)會通過虛線和虛擬手勢等功能進(jìn)行輔助,維修更換完部件后,獲取到新的監(jiān)測信息后系統(tǒng)提示檢修成功。
本模塊以園區(qū)雨水監(jiān)測裝置的巡檢為例,巡檢人員頭戴MR智能眼鏡,在注視監(jiān)測裝置時,智能眼鏡能夠以當(dāng)前視角中的物體為識別物,自動識別當(dāng)前監(jiān)測裝置,并從云上獲取監(jiān)測數(shù)據(jù),在MR安全應(yīng)急管理系統(tǒng)中顯示出監(jiān)測數(shù)據(jù)表單,巡檢人員可對監(jiān)測數(shù)據(jù)瀏覽和交互(見圖3)。
遠(yuǎn)程指導(dǎo)模塊可以實現(xiàn)PC端、平板端、手機端與眼鏡端的單點與多點互聯(lián),各端口可以獲得其他終端攝像頭的影像數(shù)據(jù)和音頻數(shù)據(jù),同時還支持文檔,圖片和視頻文件的互相傳輸和瀏覽,還可以對其他終端的畫面進(jìn)行標(biāo)注,標(biāo)注的內(nèi)容會實時投射到畫面上。以PC端和眼鏡連接為例,PC端可以實時看到眼鏡端使用者當(dāng)前視野,并可以與眼鏡端進(jìn)行語音交流,還可以在眼鏡端的視野畫面中進(jìn)行標(biāo)注(見圖4)。
1)識別精確。
MR智能眼鏡對現(xiàn)實場景中的識別物(設(shè)備)掃描后可準(zhǔn)確確定其型號和編號,并從云獲取當(dāng)前設(shè)備相應(yīng)的數(shù)據(jù),使操作者能夠與設(shè)備的數(shù)據(jù)互動。
2)定位準(zhǔn)確。
MR智能眼鏡在掃描識別物時會對識別物及周邊環(huán)境進(jìn)行掃描自動建模,掃描出的模型與導(dǎo)入系統(tǒng)的BIM模型匹配,使得BIM模型呈現(xiàn)在真實世界的位置非常準(zhǔn)確。
1)續(xù)航較差。
MR智能眼鏡電池容量較小,在使用時電量消耗較快,在高性能使用時只能維持2.5 h,而且無法更換電池,致使單個設(shè)備不能支持長時間使用。
2)信息丟失。
在BIM模型導(dǎo)入系統(tǒng)后,由于MR智能眼鏡系統(tǒng)的限制,繼承原BIM模型的信息有所丟失,無法完整繼承原本的信息。
3)硬件性能不強。
MR智能眼鏡因為其自身硬件的限制,在實際使用中,如果環(huán)境中投射的BIM模型復(fù)雜或數(shù)量較多,會造成硬件發(fā)熱或運行程序時卡頓。
本項目開發(fā)采用MR技術(shù)(混合現(xiàn)實)與BIM技術(shù)結(jié)合,研究與探索了BIM+MR技術(shù)在電力建設(shè)安全應(yīng)急的應(yīng)用,探索了設(shè)備檢修與運維巡檢,虛擬培訓(xùn)教學(xué)與遠(yuǎn)程指導(dǎo)等方向,得出以下結(jié)論:
當(dāng)前硬件性能還較差,MR智能眼鏡在使用過程中會出現(xiàn)發(fā)熱卡頓,眼鏡的顯示器面積較小,無法覆蓋整個視野,佩戴后鏡片容易起霧,造成用戶體驗感不夠好,系統(tǒng)運行時對信號依賴很大,網(wǎng)速較慢的情況下傳輸畫面會非常模糊,交互也會出現(xiàn)延遲,系統(tǒng)在導(dǎo)入BIM模型后對模型的渲染比較粗糙,光影不明顯,視覺效果較差,但是在現(xiàn)場網(wǎng)絡(luò)條件穩(wěn)定良好的情況下該技術(shù)能夠很好的輔助運維巡檢和遠(yuǎn)程指導(dǎo),所以在目前的硬件和網(wǎng)絡(luò)條件下,運用BIM+MR技術(shù)開發(fā)的功能基本能夠滿足電力建設(shè)安全應(yīng)急在運維巡檢和遠(yuǎn)程指導(dǎo)時的需要。