(中國(guó)信息通信研究院,中國(guó) 北京 100191)
(China Academy of Information and Communication Technology,Beijing 100191, China)
傳統(tǒng)的網(wǎng)絡(luò)運(yùn)維與優(yōu)化往往是基于人工經(jīng)驗(yàn)與建模的方法來(lái)進(jìn)行的,因此在當(dāng)前復(fù)雜異構(gòu)的網(wǎng)絡(luò)中存在越來(lái)越多的局限性和低效性[1],例如:網(wǎng)絡(luò)參數(shù)眾多,難以獲得精確的網(wǎng)絡(luò)模型;計(jì)算復(fù)雜度較高,很多優(yōu)化問(wèn)題屬于非確定性多項(xiàng)式難(NP-hard)問(wèn)題;缺乏對(duì)網(wǎng)絡(luò)參數(shù)的實(shí)時(shí)獲取與適應(yīng);難以獲得多方統(tǒng)一和全局最優(yōu)解。利用人工智能技術(shù)與機(jī)器學(xué)習(xí)算法,可以為網(wǎng)絡(luò)提出基于數(shù)據(jù)驅(qū)動(dòng)的實(shí)時(shí)感知、預(yù)測(cè)和管控能力,實(shí)現(xiàn)網(wǎng)絡(luò)的自治運(yùn)維、自主決策、智能優(yōu)化、精準(zhǔn)市場(chǎng)推廣與服務(wù)創(chuàng)新等。
高質(zhì)量的電信數(shù)據(jù)是實(shí)現(xiàn)網(wǎng)絡(luò)智能化應(yīng)用的前提。與傳統(tǒng)大數(shù)據(jù)相比,高質(zhì)量的電信數(shù)據(jù)有很多特殊性[2],對(duì)實(shí)時(shí)處理、統(tǒng)一管理、隱私保護(hù)和質(zhì)量保證有很高要求。
電信網(wǎng)絡(luò)中的數(shù)據(jù)可以從多個(gè)數(shù)據(jù)源來(lái)獲得,根據(jù)電信數(shù)據(jù)的時(shí)空特點(diǎn),可以將其分為實(shí)體數(shù)據(jù)和時(shí)序數(shù)據(jù);根據(jù)數(shù)據(jù)的域級(jí)可以將其分為網(wǎng)絡(luò)級(jí)數(shù)據(jù)、鏈路級(jí)數(shù)據(jù)和設(shè)備/用戶級(jí)數(shù)據(jù)。
(1)網(wǎng)絡(luò)級(jí)數(shù)據(jù)。
網(wǎng)絡(luò)級(jí)實(shí)體數(shù)據(jù)包括站點(diǎn)基礎(chǔ)信息(站點(diǎn)的歸屬、類型和配置、部署方式、布局信息等)、有源/無(wú)源的物理資源信息(物理設(shè)備類型、物理設(shè)備板卡信息等)、網(wǎng)元配置信息(小區(qū)參數(shù)、無(wú)線站點(diǎn)工參配置信息、核心網(wǎng)網(wǎng)絡(luò)配置數(shù)據(jù)等)、網(wǎng)絡(luò)拓?fù)鋽?shù)據(jù)(實(shí)體、邏輯和業(yè)務(wù)拓?fù)鋽?shù)據(jù)等),以及供應(yīng)商信息數(shù)據(jù)和網(wǎng)絡(luò)知識(shí)庫(kù)數(shù)據(jù)。網(wǎng)絡(luò)級(jí)數(shù)據(jù)還包括網(wǎng)絡(luò)級(jí)時(shí)序數(shù)據(jù)(網(wǎng)絡(luò)狀態(tài)數(shù)據(jù)例如網(wǎng)絡(luò)資源利用率等)、網(wǎng)絡(luò)性能數(shù)據(jù)(關(guān)鍵性能指標(biāo)、服務(wù)質(zhì)量、資源利用率和其他業(yè)務(wù)指標(biāo)數(shù)據(jù))、網(wǎng)絡(luò)質(zhì)量數(shù)據(jù)(丟包、抖動(dòng)、時(shí)延和吞吐量數(shù)據(jù)等)、故障類數(shù)據(jù)(網(wǎng)絡(luò)告警、事件和日志等)、運(yùn)營(yíng)類數(shù)據(jù)(信令、話務(wù)量等數(shù)據(jù))。
網(wǎng)絡(luò)級(jí)數(shù)據(jù)一般通過(guò)互聯(lián)網(wǎng)公司越過(guò)運(yùn)營(yíng)商(OTT)或網(wǎng)絡(luò)運(yùn)營(yíng)商的服務(wù)器進(jìn)行收集。OTT服務(wù)器收集的數(shù)據(jù)包含大量的文字、用戶個(gè)人資料、系統(tǒng)日志、流量?jī)?nèi)容和其他業(yè)務(wù)指標(biāo)數(shù)據(jù)等。由運(yùn)營(yíng)商進(jìn)行收集的典型的電信數(shù)據(jù)集有呼叫詳細(xì)記錄(CDR)數(shù)據(jù)、用戶平面流量(UPT)數(shù)據(jù)和控制平面流量(CPT)數(shù)據(jù)等。CDR是電信網(wǎng)絡(luò)中被研究最多的數(shù)據(jù)集,最初主要記錄用戶的語(yǔ)音和本文從而進(jìn)行計(jì)費(fèi)。CDR數(shù)據(jù)集主要包括用戶標(biāo)識(shí)、服務(wù)事件發(fā)生的時(shí)間、地點(diǎn)以及持續(xù)時(shí)間,還可能包括流量類型和大小等。CDR數(shù)據(jù)集結(jié)構(gòu)性和可用性較高,但往往只提供連接中的終端信息,僅通過(guò)CDR數(shù)據(jù)集難以實(shí)現(xiàn)對(duì)用戶行為的全面精準(zhǔn)分析。UPT數(shù)據(jù)通常包含互聯(lián)網(wǎng)協(xié)議(IP)會(huì)話的開(kāi)始、結(jié)束時(shí)間、設(shè)備/用戶的標(biāo)識(shí)符、服務(wù)類型、上下行流量以及位置信息等。CPT數(shù)據(jù)通常在網(wǎng)絡(luò)的控制面進(jìn)行收集,數(shù)據(jù)字段通常包括用戶標(biāo)識(shí)符、時(shí)間類型、基站身份標(biāo)識(shí)號(hào)(ID)和時(shí)間戳等。
(2)鏈路級(jí)數(shù)據(jù)。
網(wǎng)絡(luò)鏈路數(shù)據(jù)包括在無(wú)線側(cè)通過(guò)導(dǎo)頻信號(hào)或追蹤技術(shù)進(jìn)行收集的鏈路測(cè)量數(shù)據(jù),例如信號(hào)參考接收功率(RSRP)、參考信號(hào)接收質(zhì)量(RSRQ)、路徑損失、信道狀態(tài)信息、資源塊(RB)承載量等、傳輸/接收狀況、光纖傳輸?shù)逆溌窢顟B(tài)(如光信噪比、光纖中斷事件信息等)。在無(wú)線網(wǎng)絡(luò)中,無(wú)線測(cè)量報(bào)告(RMR)是常見(jiàn)的鏈路級(jí)數(shù)據(jù),它是基于無(wú)線電測(cè)量所生成的用戶終端(UE)側(cè)報(bào)告,用來(lái)指導(dǎo)無(wú)線網(wǎng)絡(luò)的接入操作和性能評(píng)測(cè)。數(shù)據(jù)字段通常包括用戶ID、寬帶信道質(zhì)量指示、服務(wù)RSRP、RSRP,有時(shí)也包含用戶吞吐量、終端和所服務(wù)的網(wǎng)元設(shè)備的精確位置等信息。
(3)用戶/設(shè)備級(jí)數(shù)據(jù)。
用戶/業(yè)務(wù)類實(shí)體數(shù)據(jù)包括用戶基礎(chǔ)信息(終端類型、終端配置信息、網(wǎng)絡(luò)標(biāo)識(shí)、用戶設(shè)置、個(gè)人信息等)、應(yīng)用類數(shù)據(jù)(社交偏好、健康狀況等)。時(shí)序類數(shù)據(jù)包括系統(tǒng)log(軟硬件故障和事件信息)、用戶狀態(tài)數(shù)據(jù)(移動(dòng)軌跡、速度、溫度等)、應(yīng)用數(shù)據(jù)(應(yīng)用流量、會(huì)話、使用情況等和應(yīng)用質(zhì)量數(shù)據(jù)等)。除了傳統(tǒng)用戶相關(guān)數(shù)據(jù)外,還包括來(lái)自智能網(wǎng)聯(lián)汽車的車輛狀態(tài)信息、道路感知數(shù)據(jù)和社交數(shù)據(jù)等,物聯(lián)網(wǎng)中射頻識(shí)別(RFID)數(shù)據(jù)、傳感數(shù)據(jù),以及來(lái)自智能電網(wǎng)、智慧家庭、智慧醫(yī)療、工業(yè)互聯(lián)網(wǎng)等各類應(yīng)用與設(shè)備的數(shù)據(jù)等。
(1)5V特性。
電信數(shù)據(jù)具備一般大數(shù)據(jù)的5V特性[3]:大量(Volume)、價(jià)值(Value)、多元(Variety)、高速(Velocity)和真實(shí)(Veracity)。大量是指近年來(lái)隨著5G、移動(dòng)互聯(lián)網(wǎng)和物聯(lián)網(wǎng)等相關(guān)技術(shù)的發(fā)展,電信網(wǎng)絡(luò)中的數(shù)據(jù)量正在呈爆炸式增長(zhǎng),據(jù)預(yù)測(cè),2021年中國(guó)的移動(dòng)數(shù)據(jù)流量每個(gè)月達(dá)到9.3 EBs[4];多元是指電信網(wǎng)絡(luò)異構(gòu)的網(wǎng)絡(luò)結(jié)構(gòu)和網(wǎng)絡(luò)設(shè)備、多樣化和個(gè)性化互聯(lián)網(wǎng)應(yīng)用,使得電信網(wǎng)絡(luò)數(shù)據(jù)的來(lái)源、類型、結(jié)構(gòu)等呈現(xiàn)多樣化;價(jià)值是指來(lái)自億萬(wàn)級(jí)網(wǎng)絡(luò)設(shè)備和終端的電信數(shù)據(jù)呈現(xiàn)出低價(jià)值密度的特性,同時(shí)這些電信數(shù)據(jù)中包含很多冗余的、低精度和噪聲數(shù)據(jù);高速是指電信網(wǎng)絡(luò)數(shù)據(jù)的生成和傳輸具有高速性,對(duì)電信數(shù)據(jù)的獲取和處理需要迅速及時(shí);真實(shí)是指對(duì)電信大數(shù)據(jù)的分析和處理可以反映真實(shí)世界的用戶行為和網(wǎng)絡(luò)狀況等。
(2)多維。
目前幾乎所有的網(wǎng)絡(luò)設(shè)備和移動(dòng)終端都具備了記錄位置信息和時(shí)間的能力,并嵌入越來(lái)越多的傳感器,例如加速度計(jì)、指南針、溫度計(jì)、陀螺儀和環(huán)境光傳感器等,可以提供多維度的數(shù)據(jù)。這些多維度的電信數(shù)據(jù)可以用來(lái)實(shí)現(xiàn)多種數(shù)據(jù)分析應(yīng)用,包括描述類、預(yù)測(cè)類和指令類應(yīng)用等。
(3)多邊。
電信網(wǎng)絡(luò)大數(shù)據(jù)可能來(lái)自于多個(gè)數(shù)據(jù)采集點(diǎn),由OTT服務(wù)器提供的終端應(yīng)用所產(chǎn)生的數(shù)據(jù)可能無(wú)法被運(yùn)營(yíng)商所采集,不同類型的電信網(wǎng)絡(luò)數(shù)據(jù)因此被不同的數(shù)據(jù)擁有方所獲取。
(4)多粒度。
由于不同傳感技術(shù)精度的不同、應(yīng)用信息粒度和采集時(shí)間顆粒的不同等原因,電信大數(shù)據(jù)的屬性呈現(xiàn)多種顆粒度。
(5)個(gè)性化。
電信數(shù)據(jù)中包含大量與用戶個(gè)人信息相關(guān)的數(shù)據(jù),例如身份、位置信息和軌跡等,這使得在電信大數(shù)據(jù)分析和人工智能應(yīng)用的過(guò)程中必須高度重視用戶隱私問(wèn)題。
電信數(shù)據(jù)在智能化應(yīng)用中的一般流程包括數(shù)據(jù)獲取、數(shù)據(jù)預(yù)處理(數(shù)據(jù)清洗、數(shù)據(jù)脫敏、數(shù)據(jù)聚合等)、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)處理(數(shù)據(jù)標(biāo)注、訓(xùn)練、推理等)和數(shù)據(jù)銷毀等,在其應(yīng)用的全生命周期內(nèi)需要實(shí)現(xiàn)以下關(guān)鍵要求,來(lái)支撐高質(zhì)量機(jī)器學(xué)習(xí)應(yīng)用的開(kāi)展。
(1)實(shí)時(shí)處理。
為保證智能電信網(wǎng)絡(luò)的實(shí)時(shí)感知與推理對(duì)低時(shí)延傳輸?shù)囊螅S著5G網(wǎng)絡(luò)的發(fā)展部署,在網(wǎng)絡(luò)超高密度的連接下,對(duì)來(lái)自海量設(shè)備的數(shù)據(jù)包進(jìn)行實(shí)時(shí)、無(wú)損、均衡的采集、傳輸、存儲(chǔ)、去冗余、壓縮和標(biāo)注等是需要解決的技術(shù)難點(diǎn)。
(2)規(guī)范統(tǒng)一。
不同電信網(wǎng)絡(luò)智能化應(yīng)用對(duì)于數(shù)據(jù)的需求在數(shù)據(jù)類型、實(shí)時(shí)性、范圍和顆粒度等方面各不相同。隨著電信網(wǎng)絡(luò)架構(gòu)區(qū)域扁平化,機(jī)器學(xué)習(xí)應(yīng)用過(guò)程需要支持對(duì)數(shù)據(jù)的分布式處理[5],還需要針對(duì)電信網(wǎng)絡(luò)數(shù)據(jù)類型、特征、格式和顆粒度的多樣性來(lái)進(jìn)行統(tǒng)一的數(shù)據(jù)表示、數(shù)據(jù)融合、數(shù)據(jù)預(yù)處理、數(shù)據(jù)存儲(chǔ)和數(shù)據(jù)應(yīng)用。
(3)隱私保護(hù)。
電信網(wǎng)絡(luò)數(shù)據(jù)包含了豐富的用戶個(gè)人信息。為了保證數(shù)據(jù)安全和個(gè)人隱私,在電信網(wǎng)絡(luò)智能化應(yīng)用開(kāi)展過(guò)程中一方面要確保電信數(shù)據(jù)智能化應(yīng)用全生命周期內(nèi)的個(gè)人信息保護(hù),目前常用的技術(shù)包括數(shù)據(jù)擾動(dòng)、差分隱私、同態(tài)加密、聯(lián)邦學(xué)習(xí)等;另一方面要考慮隱私保護(hù)技術(shù)的開(kāi)銷以及對(duì)數(shù)據(jù)可用性和機(jī)器學(xué)習(xí)應(yīng)用性能的影響。
(4)質(zhì)量保證。
高質(zhì)量數(shù)據(jù)集是保證機(jī)器學(xué)習(xí)在電信網(wǎng)絡(luò)中應(yīng)用性能的關(guān)鍵,現(xiàn)階段電信行業(yè)仍缺乏公開(kāi)高質(zhì)量的標(biāo)注數(shù)據(jù)集。與此同時(shí),通信系統(tǒng)的數(shù)據(jù)往往具有一定的稀疏性,在遍歷性上有所欠缺,在進(jìn)行機(jī)器學(xué)習(xí)應(yīng)用前需要對(duì)數(shù)據(jù)集進(jìn)行質(zhì)量檢驗(yàn)等。電信數(shù)據(jù)集的質(zhì)量保證需要包括準(zhǔn)確性(標(biāo)注正確率高于一定閾值,臟數(shù)據(jù)比率定于一定閾值等)、完整性(數(shù)據(jù)字段或?qū)傩匀笔П嚷实陀谝欢ㄩ撝?、?shù)據(jù)遍歷網(wǎng)絡(luò))、一致性(網(wǎng)絡(luò)特定上下文數(shù)據(jù)應(yīng)符合一定的邏輯關(guān)系,不同網(wǎng)絡(luò)層域的數(shù)據(jù)之間滿足映射關(guān)系上的一致性)、時(shí)效性(數(shù)據(jù)的獲取滿足機(jī)器學(xué)習(xí)應(yīng)用對(duì)于數(shù)據(jù)實(shí)時(shí)性的需求)等維度。
根據(jù)應(yīng)用的類型,智能電信網(wǎng)絡(luò)的應(yīng)用包括感知類、預(yù)測(cè)類與決策類應(yīng)用。
利用標(biāo)注電信數(shù)據(jù)集來(lái)對(duì)網(wǎng)絡(luò)操作行為模式和屬性進(jìn)行分類,對(duì)電信網(wǎng)絡(luò)和用戶的性能和行為進(jìn)行回歸、分類、歸因和規(guī)則匹配等,可以用來(lái)解決電信網(wǎng)絡(luò)中難以統(tǒng)一建模和以往依賴于人工經(jīng)驗(yàn)的運(yùn)維問(wèn)題[6],適用的方法和應(yīng)用主要包括:
(1)監(jiān)督學(xué)習(xí)。
監(jiān)督學(xué)習(xí)是指,由標(biāo)注好的訓(xùn)練數(shù)據(jù)集中學(xué)到或建立一個(gè)模式(函數(shù)/學(xué)習(xí)模型),并依此模式推測(cè)新的實(shí)例(網(wǎng)絡(luò)參數(shù)、用戶特征等)。在電信網(wǎng)絡(luò)中適用的模型和算法包括貝葉斯理論、決策樹(shù)、隨機(jī)森林、K-近鄰、支持向量機(jī)、回歸分析和(深度)神經(jīng)網(wǎng)絡(luò)等[7]。在物理層,監(jiān)督學(xué)習(xí)可以用來(lái)實(shí)現(xiàn)無(wú)線頻譜管理、功率控制、調(diào)制格式識(shí)別、傳輸性能檢測(cè)等,在網(wǎng)絡(luò)層可以實(shí)現(xiàn)故障檢測(cè)與分類、故障根因分析、智能路由、負(fù)載均衡等,在應(yīng)用層可以實(shí)現(xiàn)流量分類、用戶關(guān)系鏈發(fā)現(xiàn)、經(jīng)營(yíng)分析、精準(zhǔn)營(yíng)銷和實(shí)時(shí)營(yíng)銷、個(gè)性化推薦等。
(2)序列模式挖掘。
序列模式挖掘是指,用于在包含時(shí)間或序列的電信數(shù)據(jù)集中發(fā)現(xiàn)頻繁發(fā)生的有序時(shí)間或子序列模式。序列模式挖掘與關(guān)聯(lián)規(guī)則挖掘之間的區(qū)別在于前者需要序列間的先后順序,后者不關(guān)注事物之間的先后順序。典型的算法包括Apriori算法、Agrawal和Srikant提出的廣義序列模式概念(GPS)、等價(jià)類發(fā)現(xiàn)序列模式(SPADE)、PrefixSpan以及在此基礎(chǔ)上進(jìn)行改進(jìn)的CloSpan算法等,可以用來(lái)進(jìn)行網(wǎng)絡(luò)資源利用率預(yù)測(cè)、用戶行為分析、客服生命周期管理、Web訪問(wèn)預(yù)測(cè)等。
(3)聚類。
聚類是指,不需要標(biāo)注,直接根據(jù)對(duì)象之間相似性來(lái)進(jìn)行分組。典型的算法包括K均值、凝聚層次聚類和DBSCAN等,可以用來(lái)進(jìn)行流量分類、用戶內(nèi)容推薦、移動(dòng)性管理、異常檢測(cè)和攻擊防御等多類應(yīng)用。
(4)知識(shí)圖譜。
知識(shí)圖譜用于描述電信網(wǎng)絡(luò)中的各種概念、術(shù)語(yǔ)及其相互關(guān)系,可以用來(lái)進(jìn)行電信網(wǎng)絡(luò)的專家知識(shí)與運(yùn)維經(jīng)驗(yàn)的數(shù)字化。
預(yù)測(cè)類分析主要利用現(xiàn)有電信數(shù)據(jù)集來(lái)對(duì)未來(lái)的行為和趨勢(shì)進(jìn)行預(yù)測(cè),是電信網(wǎng)絡(luò)實(shí)現(xiàn)網(wǎng)絡(luò)自適應(yīng)調(diào)整與優(yōu)化的基礎(chǔ),主要的算法和應(yīng)用包括:
(1)時(shí)間序列分析算法。
時(shí)間序列分析算法是指,利用前期數(shù)值與后期數(shù)值的相關(guān)關(guān)系,建立包含前期數(shù)值和后期數(shù)值的回歸方程,從而達(dá)到預(yù)測(cè)的目的。該算法包括自回歸(AR)模型、移動(dòng)平均(MA)模型、自回歸移動(dòng)平均(ARMA)模型和差分自回歸移動(dòng)平均(ARIMA)模型等。在電信網(wǎng)絡(luò)中,可以用來(lái)實(shí)現(xiàn)網(wǎng)絡(luò)長(zhǎng)時(shí)流量預(yù)測(cè)、設(shè)備熱遷移、異常檢測(cè)、入侵檢測(cè)等。
(2)回歸算法。
回歸算法用來(lái)確立目標(biāo)特征之間關(guān)系函數(shù),從而對(duì)連續(xù)值進(jìn)行預(yù)測(cè)。電信網(wǎng)絡(luò)中服務(wù)質(zhì)量(QoS)參數(shù)、流量、網(wǎng)絡(luò)資源利用率、無(wú)線路徑損耗等數(shù)值往往是連續(xù)的,適合采用回歸算法來(lái)進(jìn)行預(yù)測(cè)分析。
(3)分類算法。
分類算法是指,將電信數(shù)據(jù)集合中出現(xiàn)的列項(xiàng)分配到目標(biāo)類別的過(guò)程。典型的算法包括樸素貝葉斯、貝葉斯網(wǎng)絡(luò)、K最近鄰(K-NN)、支持向量機(jī)(SVM)、決策樹(shù)和隨機(jī)森林等,適用的應(yīng)用包括關(guān)鍵性能指標(biāo)(KPI)預(yù)測(cè)、故障檢測(cè)、傳感器成簇、流量分類、負(fù)載均衡、智能緩存、智能路由等。
(4)隨機(jī)建模算法。
電信網(wǎng)絡(luò)應(yīng)用較多的隨機(jī)模型包括動(dòng)態(tài)貝葉斯網(wǎng)絡(luò)、馬爾科夫模型、卡爾曼濾波器和擴(kuò)展卡爾曼濾波器等,這些模型一般用于系統(tǒng)狀態(tài)隨時(shí)間轉(zhuǎn)移的概率建模,例如馬爾科夫模型中在給定當(dāng)前信息的情況下,將來(lái)的狀態(tài)則與過(guò)去的狀態(tài)無(wú)關(guān)。通過(guò)收集一定數(shù)量和時(shí)間序列上的用戶信息,來(lái)對(duì)隨機(jī)模型進(jìn)行參數(shù)估計(jì),可以實(shí)現(xiàn)對(duì)未來(lái)用戶和網(wǎng)絡(luò)行為進(jìn)行預(yù)測(cè)。
(5)深度學(xué)習(xí)算法。
隨著網(wǎng)絡(luò)計(jì)算能力的提升以及訓(xùn)練樣本的增加,深度學(xué)習(xí)算法得到了越來(lái)越多的重視,文獻(xiàn)[8]對(duì)深度學(xué)習(xí)算法在無(wú)線網(wǎng)絡(luò)中的應(yīng)用進(jìn)行了總結(jié),常用的模型包括循環(huán)神經(jīng)網(wǎng)絡(luò)(RNN)、長(zhǎng)短期記憶網(wǎng)絡(luò)(LSTM)等,可以實(shí)現(xiàn)信號(hào)檢驗(yàn)、異常檢測(cè)、移動(dòng)性預(yù)測(cè)、KPI預(yù)測(cè)等應(yīng)用。
預(yù)測(cè)類分析利用電信數(shù)據(jù)集對(duì)網(wǎng)絡(luò)狀態(tài)進(jìn)行分析,在特定目標(biāo)下輸出對(duì)網(wǎng)絡(luò)最優(yōu)的控制決策,從而實(shí)現(xiàn)網(wǎng)絡(luò)的自適應(yīng)調(diào)整與優(yōu)化控制,主要的算法和應(yīng)用包括:
(1)(深度)強(qiáng)化學(xué)習(xí)。
(深度)強(qiáng)化學(xué)習(xí)用來(lái)解決智能體在與環(huán)境交互的過(guò)程中通過(guò)學(xué)習(xí)策略以達(dá)到回報(bào)最大化或?qū)崿F(xiàn)特定目標(biāo),環(huán)境中包含未知的變量或狀態(tài)信息等。在電信網(wǎng)絡(luò)中,(深度)強(qiáng)化學(xué)習(xí)可以在對(duì)網(wǎng)絡(luò)參與無(wú)法完全已知的情況下實(shí)現(xiàn)基站智能節(jié)能、多信道動(dòng)態(tài)接入、功率分配、智能緩存等應(yīng)用。
(2)博弈論。
在存在多用戶的電信網(wǎng)絡(luò)中,博弈論可以針對(duì)具有競(jìng)爭(zhēng)或合作性質(zhì)的個(gè)體,研究它們的優(yōu)化策略,在電信網(wǎng)絡(luò)中已經(jīng)出現(xiàn)了相關(guān)應(yīng)用,例如多用戶的頻譜感知、多用戶合作的內(nèi)容分發(fā)等。
基于AI技術(shù)的電信網(wǎng)絡(luò)智能化已經(jīng)成為目前通信行業(yè)的研究熱點(diǎn),其核心為數(shù)據(jù)驅(qū)動(dòng)的網(wǎng)絡(luò)感知、預(yù)測(cè)、推斷和決策能力的提升。在網(wǎng)絡(luò)智能化的實(shí)現(xiàn)過(guò)程中,高質(zhì)量的電信數(shù)據(jù)是進(jìn)行機(jī)器學(xué)習(xí)應(yīng)用的先決條件。通過(guò)對(duì)電信數(shù)據(jù)進(jìn)行實(shí)時(shí)處理、規(guī)范統(tǒng)一、隱私保護(hù)和質(zhì)量保證,有望在電信網(wǎng)絡(luò)中實(shí)現(xiàn)智能運(yùn)維、智能網(wǎng)絡(luò)優(yōu)化、智能網(wǎng)絡(luò)控制優(yōu)化、用戶個(gè)性化服務(wù)與創(chuàng)新等內(nèi)生智能能力。