• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    運營商私有云架構(gòu)設計及IT系統(tǒng)整合策略淺析

    2014-09-10 11:21:45常海防雷鳴唐旭東劉瀟
    移動通信 2014年14期
    關鍵詞:小型機云化運營商

    常海防+雷鳴+唐旭東+劉瀟

    隨著技術的日趨成熟,云計算已成為未來移動互聯(lián)網(wǎng)發(fā)展的基礎和核心,并將逐步替代傳統(tǒng)IT技術,是運營商降低IT建設和維護成本的重要手段。通過探討運營商傳統(tǒng)IT支撐系統(tǒng)和業(yè)務平臺建設模式存在的問題,深入分析和研究了運營商私有云架構(gòu)設計方案,并給出了IT支撐系統(tǒng)和業(yè)務平臺基于私有云整合的建設思路。

    Analysis on Private Cloud Architecture Design and IT System

    Integration Solution of Operators

    CHANG Hai-fang, LEI Ming, TANG Xu-dong, LIU Xiao

    (China Mobile Group Design Institute Co., Ltd., Beijing 100080, China)

    With the maturation of technology, cloud computing has become the basis and core of mobile Internet development in the future. It will replace the traditional IT technology gradually, and it is an important means to reduce the cost of IT construction and maintenance for operators. By discussing the problems existing in traditional IT support systems and business platform construction pattern, the private cloud architecture design of operators is analyzed and studied in depth. Meanwhile, the construction thoughts of IT support system and business platform based on the integration of the private cloud are provided.

    private cloud IT support system business platform integration solution

    1 引言

    經(jīng)過多年的滾動建設,運營商已經(jīng)建成了較為完善的IT支撐系統(tǒng)、業(yè)務平臺等IT系統(tǒng)。然而,運營商的IT系統(tǒng)建設目前主要還是以分散獨立的“煙囪式”建設模式為主。IT系統(tǒng)“山頭林立”,運營商各省公司擁有為數(shù)眾多的硬件平臺,并且硬件能力是按照各應用系統(tǒng)的峰值負載進行配置,在大多時間里資源的利用率較低。

    云計算作為新型IT基礎設施和基于互聯(lián)網(wǎng)的服務提供架構(gòu),用戶可以通過互聯(lián)網(wǎng)以按需、易擴展的方式獲得所需的基礎設施、平臺、軟件(或應用)等。通過構(gòu)建統(tǒng)一的私有云,整合IT支撐系統(tǒng)和業(yè)務平臺,實現(xiàn)IT資源共享與按需分配,可以幫助運營商優(yōu)化信息基礎設施、業(yè)務流程和管理體制,降低IT建設和維護成本,提高資源利用和運營維護效率,從而提升運營商IT系統(tǒng)及信息基礎設施的可持續(xù)發(fā)展能力。

    2 運營商IT系統(tǒng)建設現(xiàn)狀

    為了滿足業(yè)務規(guī)模、網(wǎng)絡規(guī)模的持續(xù)增長以及提高精細化管理水平的需要,運營商以省集中的模式建設了大量的IT支撐系統(tǒng)和業(yè)務平臺,這些系統(tǒng)規(guī)模大小不一、業(yè)務用途各異,且每年以滾動建設的方式快速膨脹。以某運營商省公司為例,IT支撐系統(tǒng)主要由面向客戶服務和業(yè)務管理的BSS(Business Support System,業(yè)務支撐系統(tǒng))、面向通信網(wǎng)絡管理的OSS(Operational Support System,網(wǎng)管支撐系統(tǒng))以及面向企業(yè)內(nèi)部管理的MSS(Management Support System,管理支撐系統(tǒng))三部分組成;業(yè)務平臺主要由基礎能力類業(yè)務平臺和增值業(yè)務類業(yè)務平臺組成。其中,BSS主要包括BOSS(Business Operating Support System,業(yè)務運營支撐系統(tǒng))、CRM(Customer Relationship Management,客戶關系管理系統(tǒng))、BASS(Business Analysis Support System,經(jīng)營分析系統(tǒng))、呼叫中心等;OSS主要包括傳輸網(wǎng)網(wǎng)管系統(tǒng)、話務網(wǎng)網(wǎng)管系統(tǒng)、EOMS(Electric Operation Maintenance System,電子運行維護系統(tǒng))等;MSS主要包括統(tǒng)一信息平臺、人力資源管理系統(tǒng)、計劃管理系統(tǒng)等;基礎能力類業(yè)務平臺主要包括多媒體彩鈴平臺、彩信中心、彩信網(wǎng)關、短信中心等;增值業(yè)務類業(yè)務平臺主要包括飛信、號簿管家、手機閱讀、139郵箱等。

    運營商IT支撐系統(tǒng)和業(yè)務平臺等IT系統(tǒng)的硬件設備主要包括小型機、X86服務器、存儲設備、網(wǎng)絡設備、安全設備等,且大部分硬件環(huán)境是按照應用系統(tǒng)的峰值負載進行配置。隨著用戶規(guī)模和業(yè)務的不斷發(fā)展,硬件設備規(guī)模日趨龐大,給建設部門和維護部門造成了沉重的壓力,傳統(tǒng)的系統(tǒng)建設模式存在諸多問題:煙囪式的系統(tǒng)架構(gòu)造成重復建設和資源浪費,管理和維護繁瑣;系統(tǒng)建設周期長,無法快速提供業(yè)務部署能力;資源利用率低,設備能耗高,不利于節(jié)能減排。

    3 運營商私有云架構(gòu)設計方案

    為了解決傳統(tǒng)系統(tǒng)建設中存在的問題,必須從根本上改變IT系統(tǒng)的建設模式,通過構(gòu)建運營商私有云進行系統(tǒng)間硬件資源的融合共享,實現(xiàn)硬件資源按照各系統(tǒng)需求動態(tài)分配,以“資源池”的形式為IT支撐系統(tǒng)和業(yè)務平臺等內(nèi)部各類IT應用系統(tǒng)提供基礎設施資源,達到提高資源利用率、降低投資成本、快速業(yè)務部署的目的。endprint

    3.1 私有云體系架構(gòu)

    運營商私有云用以承載IT支撐系統(tǒng)和業(yè)務平臺等內(nèi)部各類IT系統(tǒng),其由私有云管理平臺和一個或多個資源池系統(tǒng)組成。資源池系統(tǒng)提供各類IT系統(tǒng)部署和運行所需的IT基礎設施,主要由計算類資源、存儲類資源、網(wǎng)絡類資源組成。運營商私有云體系架構(gòu)如圖1所示:

    (1)計算類資源

    根據(jù)應用系統(tǒng)對資源的管理、使用、安全、性能等方面的需求特點的不同,私有云資源池提供的計算類資源主要包括X86服務器(物理機、虛擬機)資源和小型機資源,由X86服務器、小型機提供。其中,對穩(wěn)定性和可靠性要求較高的關鍵應用系統(tǒng),私有云向該類應用系統(tǒng)提供小型機計算資源,包括小型機的操作系統(tǒng)和通用軟件的部署。

    (2)存儲類資源

    私有云存儲資源由分布式文件系統(tǒng)、SAN(Storage Area Network,存儲區(qū)域網(wǎng)絡)存儲設備、日志詳單類數(shù)據(jù)存儲系統(tǒng)、NoSQL(Not Only SQL,非關系型數(shù)據(jù)庫)存儲系統(tǒng)和對象存儲系統(tǒng)提供。其中,分布式文件存儲、對象存儲、NoSQL和日志詳單類數(shù)據(jù)存儲基于X86服務器實現(xiàn);SAN存儲基于磁盤陣列實現(xiàn)。

    (3)網(wǎng)絡類資源

    私有云網(wǎng)絡資源包括IP資源、帶寬資源、防火墻資源、負載均衡資源等,由路由器/交換機、防火墻、負載均衡器等設備提供。

    (4)私有云管理平臺

    私有云管理平臺負責私有云各種IT資源的管理,其通過與資源池系統(tǒng)之間的資源管理接口配合來下發(fā)資源管理指令。同時,私有云管理平臺還與運營商的EOMS、網(wǎng)管系統(tǒng)、ISMG(Internet Short Message Gateway,短信網(wǎng)關)系統(tǒng)和4A系統(tǒng)相連接。一個資源池系統(tǒng)可根據(jù)不同的管理服務要求和安全等級,將其中的IT基礎設施資源劃分為不同的子集合,并在安全、網(wǎng)絡、服務等方面進行必要的物理或邏輯隔離,形成安全域分區(qū)。安全域分區(qū)僅針對計算資源,不跨數(shù)據(jù)中心部署。

    3.2 私有云組網(wǎng)方案

    綜合考慮業(yè)界云計算成功實施經(jīng)驗,結(jié)合運營商自身業(yè)務特點,采用層次化和模塊化的設計方案,建議運營商私有云網(wǎng)絡組網(wǎng)分為三層:網(wǎng)絡出口層、核心層和業(yè)務接入層。

    (1)網(wǎng)絡出口層

    網(wǎng)絡出口層負責私有云與外部網(wǎng)絡的互聯(lián),保證資源池內(nèi)部網(wǎng)絡高速訪問互聯(lián)網(wǎng)和IP專用承載網(wǎng),并對資源池內(nèi)網(wǎng)和外網(wǎng)的路由信息進行轉(zhuǎn)換及維護。在網(wǎng)絡出口層部署防火墻,且與核心層防火墻構(gòu)成雙層異構(gòu)。

    (2)核心層

    核心層向下負責匯聚網(wǎng)絡內(nèi)的接入層交換設備,保證網(wǎng)絡內(nèi)接入層交換設備之間的高速交換;向上與出口路由設備進行互聯(lián)。在核心層部署防火墻,用于網(wǎng)絡地址轉(zhuǎn)換并提供安全防護。接入交換機至核心交換機采用全網(wǎng)狀互聯(lián)方式。

    (3)業(yè)務接入層

    業(yè)務接入層包括網(wǎng)絡接入設備、機架式服務器(含計算設備、云存儲和塊存儲設備)。其中,機架式服務器首先接入業(yè)務/存儲接入交換機,接入交換機成對配置。每對計算接入交換機下聯(lián)約40臺計算服務器,以4*40GE鏈路上聯(lián);每對存儲接入交換機下聯(lián)約30臺MPP/Hadoop服務器,以4*40GE鏈路上聯(lián)。

    4 運營商IT系統(tǒng)云化整合建設策略

    云計算技術正在逐步替代傳統(tǒng)IT技術,成為運營商優(yōu)化IT系統(tǒng)及信息基礎設施的重要手段。通過構(gòu)建統(tǒng)一的私有云資源池,推動IT支撐系統(tǒng)與業(yè)務平臺向私有云資源池的遷移,對于運營商實現(xiàn)IT設備資源的集中建設和集中采購、發(fā)揮云計算規(guī)模優(yōu)勢、降低建設和采購成本具有重要意義。

    IT支撐系統(tǒng)與業(yè)務平臺云化整合應遵循“統(tǒng)分兼顧,逐步集中”的建設實施指導原則,初期采用已有平臺改造和新建及擴容系統(tǒng)基于私有云建設的模式展開。

    4.1 IT支撐系統(tǒng)云化整合建設策略

    IT支撐系統(tǒng)多為“交易型數(shù)據(jù)庫”應用(以關系型數(shù)據(jù)庫為核心的實時交易類或批量操作,數(shù)據(jù)處理規(guī)模較大,數(shù)據(jù)關系復雜,對資源的性能和可靠性要求很高)、分析類應用和海量數(shù)據(jù)存儲應用,現(xiàn)網(wǎng)較大比例采用“Unix小型機+高端磁盤陣列”架構(gòu)實現(xiàn)。IT支撐系統(tǒng)云化整合方案建議從小應用整合、分析類應用和海量數(shù)據(jù)存儲系統(tǒng)入手,逐步推進IT支撐系統(tǒng)向私有云遷移。

    (1)BOSS/CRM等關鍵的交易型核心數(shù)據(jù)庫系統(tǒng)對資源的可靠性、性能、安全性等要求很高,建議部署在私有云小型機資源和FC SAN存儲上。

    (2)對于分析類數(shù)據(jù)庫應用,在新建及系統(tǒng)擴容中,積極推動數(shù)據(jù)倉庫由傳統(tǒng)“Unix小型機+高端磁盤陣列”架構(gòu)向基于X86服務器的MPP/Hadoop集群遷移。

    (3)對于Web/APP應用,建議部署在私有云X86計算資源上,利用先進的軟件架構(gòu)與X86服務器技術相結(jié)合,實現(xiàn)Web/APP應用的分布式計算、平行擴展、負載均衡和高穩(wěn)定性。

    4.2 業(yè)務平臺云化整合建設策略

    目前業(yè)務平臺大多數(shù)為“規(guī)模事務類”應用(即并發(fā)請求數(shù)量大且相互獨立,單個請求處理量小),這類應用更適合承載在私有云資源池上,且目前多數(shù)業(yè)務平臺已采用X86服務器集群+數(shù)據(jù)庫服務器的部署模式。因此,業(yè)務平臺云化整合方案建議從現(xiàn)有業(yè)務平臺進一步云化改造入手,在系統(tǒng)新建及擴容過程中逐步推進各類業(yè)務平臺向私有云遷移。

    (1)加快運營商各類業(yè)務平臺的X86架構(gòu)改造,逐步將WAP網(wǎng)關、彩信中心、無線城市、短信中心、短信網(wǎng)關、LBS(Location Based Services,位置服務)、短號短信等業(yè)務平臺遷移至私有云X86服務器資源池上。

    (2)新建及擴容業(yè)務平臺全部由私有云承載,并在部署中充分考慮錯峰填谷、安全性、資源共享效率等因素,降低IT建設和維護成本,提高資源利用率,實現(xiàn)業(yè)務的快速申請和上線部署。

    5 結(jié)束語

    與基礎通信網(wǎng)絡不同,IT支撐系統(tǒng)和業(yè)務平臺等IT系統(tǒng)先天就具有集中化的特點。集中化部署是業(yè)界發(fā)展趨勢,也是運營商實現(xiàn)“低成本高效運營”的重要手段。云計算的基本思想是“集中力量辦大事”,不僅技術本身具有集中化優(yōu)勢,而且管理流程上也提出集中化要求?;谒接性萍谐休d原有IT支撐系統(tǒng)和業(yè)務平臺,可以實現(xiàn)IT系統(tǒng)集中化整合,靈活快速地為應用系統(tǒng)提供硬件資源,滿足應用系統(tǒng)的彈性資源需求,從而有效促進運營商IT系統(tǒng)集中化戰(zhàn)略的實施,提高資源的利用效率,降低對能源的消耗和后期運營成本,最終實現(xiàn)節(jié)能減排的目標。

    參考文獻:

    [1] 劉芹,劉玲,畢曉飛. 業(yè)務平臺云遷移方案的探討[J]. 電信工程技術與標準化, 2012,25(4): 35-38.

    [2] 丁淵. 基于云計算的電信IT支撐系統(tǒng)研究[J]. 電腦與電信, 2010(8): 42-43.

    [3] 倪曉熔. 電信運營商IT支撐云計算資源池建設方案[J]. 電信工程技術與標準化, 2012,25(4): 49-53.

    [4] 喻朝新,陳墩金,羅家鋒. 云計算在IT支撐系統(tǒng)應用的實現(xiàn)[J]. 數(shù)據(jù)通信, 2013(2): 12-15.

    [5] 關德軍,周卓然,李俊義. 企業(yè)私有云建設經(jīng)驗與進一步融合思考[J]. 電信技術, 2013(11): 50-52.endprint

    3.1 私有云體系架構(gòu)

    運營商私有云用以承載IT支撐系統(tǒng)和業(yè)務平臺等內(nèi)部各類IT系統(tǒng),其由私有云管理平臺和一個或多個資源池系統(tǒng)組成。資源池系統(tǒng)提供各類IT系統(tǒng)部署和運行所需的IT基礎設施,主要由計算類資源、存儲類資源、網(wǎng)絡類資源組成。運營商私有云體系架構(gòu)如圖1所示:

    (1)計算類資源

    根據(jù)應用系統(tǒng)對資源的管理、使用、安全、性能等方面的需求特點的不同,私有云資源池提供的計算類資源主要包括X86服務器(物理機、虛擬機)資源和小型機資源,由X86服務器、小型機提供。其中,對穩(wěn)定性和可靠性要求較高的關鍵應用系統(tǒng),私有云向該類應用系統(tǒng)提供小型機計算資源,包括小型機的操作系統(tǒng)和通用軟件的部署。

    (2)存儲類資源

    私有云存儲資源由分布式文件系統(tǒng)、SAN(Storage Area Network,存儲區(qū)域網(wǎng)絡)存儲設備、日志詳單類數(shù)據(jù)存儲系統(tǒng)、NoSQL(Not Only SQL,非關系型數(shù)據(jù)庫)存儲系統(tǒng)和對象存儲系統(tǒng)提供。其中,分布式文件存儲、對象存儲、NoSQL和日志詳單類數(shù)據(jù)存儲基于X86服務器實現(xiàn);SAN存儲基于磁盤陣列實現(xiàn)。

    (3)網(wǎng)絡類資源

    私有云網(wǎng)絡資源包括IP資源、帶寬資源、防火墻資源、負載均衡資源等,由路由器/交換機、防火墻、負載均衡器等設備提供。

    (4)私有云管理平臺

    私有云管理平臺負責私有云各種IT資源的管理,其通過與資源池系統(tǒng)之間的資源管理接口配合來下發(fā)資源管理指令。同時,私有云管理平臺還與運營商的EOMS、網(wǎng)管系統(tǒng)、ISMG(Internet Short Message Gateway,短信網(wǎng)關)系統(tǒng)和4A系統(tǒng)相連接。一個資源池系統(tǒng)可根據(jù)不同的管理服務要求和安全等級,將其中的IT基礎設施資源劃分為不同的子集合,并在安全、網(wǎng)絡、服務等方面進行必要的物理或邏輯隔離,形成安全域分區(qū)。安全域分區(qū)僅針對計算資源,不跨數(shù)據(jù)中心部署。

    3.2 私有云組網(wǎng)方案

    綜合考慮業(yè)界云計算成功實施經(jīng)驗,結(jié)合運營商自身業(yè)務特點,采用層次化和模塊化的設計方案,建議運營商私有云網(wǎng)絡組網(wǎng)分為三層:網(wǎng)絡出口層、核心層和業(yè)務接入層。

    (1)網(wǎng)絡出口層

    網(wǎng)絡出口層負責私有云與外部網(wǎng)絡的互聯(lián),保證資源池內(nèi)部網(wǎng)絡高速訪問互聯(lián)網(wǎng)和IP專用承載網(wǎng),并對資源池內(nèi)網(wǎng)和外網(wǎng)的路由信息進行轉(zhuǎn)換及維護。在網(wǎng)絡出口層部署防火墻,且與核心層防火墻構(gòu)成雙層異構(gòu)。

    (2)核心層

    核心層向下負責匯聚網(wǎng)絡內(nèi)的接入層交換設備,保證網(wǎng)絡內(nèi)接入層交換設備之間的高速交換;向上與出口路由設備進行互聯(lián)。在核心層部署防火墻,用于網(wǎng)絡地址轉(zhuǎn)換并提供安全防護。接入交換機至核心交換機采用全網(wǎng)狀互聯(lián)方式。

    (3)業(yè)務接入層

    業(yè)務接入層包括網(wǎng)絡接入設備、機架式服務器(含計算設備、云存儲和塊存儲設備)。其中,機架式服務器首先接入業(yè)務/存儲接入交換機,接入交換機成對配置。每對計算接入交換機下聯(lián)約40臺計算服務器,以4*40GE鏈路上聯(lián);每對存儲接入交換機下聯(lián)約30臺MPP/Hadoop服務器,以4*40GE鏈路上聯(lián)。

    4 運營商IT系統(tǒng)云化整合建設策略

    云計算技術正在逐步替代傳統(tǒng)IT技術,成為運營商優(yōu)化IT系統(tǒng)及信息基礎設施的重要手段。通過構(gòu)建統(tǒng)一的私有云資源池,推動IT支撐系統(tǒng)與業(yè)務平臺向私有云資源池的遷移,對于運營商實現(xiàn)IT設備資源的集中建設和集中采購、發(fā)揮云計算規(guī)模優(yōu)勢、降低建設和采購成本具有重要意義。

    IT支撐系統(tǒng)與業(yè)務平臺云化整合應遵循“統(tǒng)分兼顧,逐步集中”的建設實施指導原則,初期采用已有平臺改造和新建及擴容系統(tǒng)基于私有云建設的模式展開。

    4.1 IT支撐系統(tǒng)云化整合建設策略

    IT支撐系統(tǒng)多為“交易型數(shù)據(jù)庫”應用(以關系型數(shù)據(jù)庫為核心的實時交易類或批量操作,數(shù)據(jù)處理規(guī)模較大,數(shù)據(jù)關系復雜,對資源的性能和可靠性要求很高)、分析類應用和海量數(shù)據(jù)存儲應用,現(xiàn)網(wǎng)較大比例采用“Unix小型機+高端磁盤陣列”架構(gòu)實現(xiàn)。IT支撐系統(tǒng)云化整合方案建議從小應用整合、分析類應用和海量數(shù)據(jù)存儲系統(tǒng)入手,逐步推進IT支撐系統(tǒng)向私有云遷移。

    (1)BOSS/CRM等關鍵的交易型核心數(shù)據(jù)庫系統(tǒng)對資源的可靠性、性能、安全性等要求很高,建議部署在私有云小型機資源和FC SAN存儲上。

    (2)對于分析類數(shù)據(jù)庫應用,在新建及系統(tǒng)擴容中,積極推動數(shù)據(jù)倉庫由傳統(tǒng)“Unix小型機+高端磁盤陣列”架構(gòu)向基于X86服務器的MPP/Hadoop集群遷移。

    (3)對于Web/APP應用,建議部署在私有云X86計算資源上,利用先進的軟件架構(gòu)與X86服務器技術相結(jié)合,實現(xiàn)Web/APP應用的分布式計算、平行擴展、負載均衡和高穩(wěn)定性。

    4.2 業(yè)務平臺云化整合建設策略

    目前業(yè)務平臺大多數(shù)為“規(guī)模事務類”應用(即并發(fā)請求數(shù)量大且相互獨立,單個請求處理量?。?,這類應用更適合承載在私有云資源池上,且目前多數(shù)業(yè)務平臺已采用X86服務器集群+數(shù)據(jù)庫服務器的部署模式。因此,業(yè)務平臺云化整合方案建議從現(xiàn)有業(yè)務平臺進一步云化改造入手,在系統(tǒng)新建及擴容過程中逐步推進各類業(yè)務平臺向私有云遷移。

    (1)加快運營商各類業(yè)務平臺的X86架構(gòu)改造,逐步將WAP網(wǎng)關、彩信中心、無線城市、短信中心、短信網(wǎng)關、LBS(Location Based Services,位置服務)、短號短信等業(yè)務平臺遷移至私有云X86服務器資源池上。

    (2)新建及擴容業(yè)務平臺全部由私有云承載,并在部署中充分考慮錯峰填谷、安全性、資源共享效率等因素,降低IT建設和維護成本,提高資源利用率,實現(xiàn)業(yè)務的快速申請和上線部署。

    5 結(jié)束語

    與基礎通信網(wǎng)絡不同,IT支撐系統(tǒng)和業(yè)務平臺等IT系統(tǒng)先天就具有集中化的特點。集中化部署是業(yè)界發(fā)展趨勢,也是運營商實現(xiàn)“低成本高效運營”的重要手段。云計算的基本思想是“集中力量辦大事”,不僅技術本身具有集中化優(yōu)勢,而且管理流程上也提出集中化要求?;谒接性萍谐休d原有IT支撐系統(tǒng)和業(yè)務平臺,可以實現(xiàn)IT系統(tǒng)集中化整合,靈活快速地為應用系統(tǒng)提供硬件資源,滿足應用系統(tǒng)的彈性資源需求,從而有效促進運營商IT系統(tǒng)集中化戰(zhàn)略的實施,提高資源的利用效率,降低對能源的消耗和后期運營成本,最終實現(xiàn)節(jié)能減排的目標。

    參考文獻:

    [1] 劉芹,劉玲,畢曉飛. 業(yè)務平臺云遷移方案的探討[J]. 電信工程技術與標準化, 2012,25(4): 35-38.

    [2] 丁淵. 基于云計算的電信IT支撐系統(tǒng)研究[J]. 電腦與電信, 2010(8): 42-43.

    [3] 倪曉熔. 電信運營商IT支撐云計算資源池建設方案[J]. 電信工程技術與標準化, 2012,25(4): 49-53.

    [4] 喻朝新,陳墩金,羅家鋒. 云計算在IT支撐系統(tǒng)應用的實現(xiàn)[J]. 數(shù)據(jù)通信, 2013(2): 12-15.

    [5] 關德軍,周卓然,李俊義. 企業(yè)私有云建設經(jīng)驗與進一步融合思考[J]. 電信技術, 2013(11): 50-52.endprint

    3.1 私有云體系架構(gòu)

    運營商私有云用以承載IT支撐系統(tǒng)和業(yè)務平臺等內(nèi)部各類IT系統(tǒng),其由私有云管理平臺和一個或多個資源池系統(tǒng)組成。資源池系統(tǒng)提供各類IT系統(tǒng)部署和運行所需的IT基礎設施,主要由計算類資源、存儲類資源、網(wǎng)絡類資源組成。運營商私有云體系架構(gòu)如圖1所示:

    (1)計算類資源

    根據(jù)應用系統(tǒng)對資源的管理、使用、安全、性能等方面的需求特點的不同,私有云資源池提供的計算類資源主要包括X86服務器(物理機、虛擬機)資源和小型機資源,由X86服務器、小型機提供。其中,對穩(wěn)定性和可靠性要求較高的關鍵應用系統(tǒng),私有云向該類應用系統(tǒng)提供小型機計算資源,包括小型機的操作系統(tǒng)和通用軟件的部署。

    (2)存儲類資源

    私有云存儲資源由分布式文件系統(tǒng)、SAN(Storage Area Network,存儲區(qū)域網(wǎng)絡)存儲設備、日志詳單類數(shù)據(jù)存儲系統(tǒng)、NoSQL(Not Only SQL,非關系型數(shù)據(jù)庫)存儲系統(tǒng)和對象存儲系統(tǒng)提供。其中,分布式文件存儲、對象存儲、NoSQL和日志詳單類數(shù)據(jù)存儲基于X86服務器實現(xiàn);SAN存儲基于磁盤陣列實現(xiàn)。

    (3)網(wǎng)絡類資源

    私有云網(wǎng)絡資源包括IP資源、帶寬資源、防火墻資源、負載均衡資源等,由路由器/交換機、防火墻、負載均衡器等設備提供。

    (4)私有云管理平臺

    私有云管理平臺負責私有云各種IT資源的管理,其通過與資源池系統(tǒng)之間的資源管理接口配合來下發(fā)資源管理指令。同時,私有云管理平臺還與運營商的EOMS、網(wǎng)管系統(tǒng)、ISMG(Internet Short Message Gateway,短信網(wǎng)關)系統(tǒng)和4A系統(tǒng)相連接。一個資源池系統(tǒng)可根據(jù)不同的管理服務要求和安全等級,將其中的IT基礎設施資源劃分為不同的子集合,并在安全、網(wǎng)絡、服務等方面進行必要的物理或邏輯隔離,形成安全域分區(qū)。安全域分區(qū)僅針對計算資源,不跨數(shù)據(jù)中心部署。

    3.2 私有云組網(wǎng)方案

    綜合考慮業(yè)界云計算成功實施經(jīng)驗,結(jié)合運營商自身業(yè)務特點,采用層次化和模塊化的設計方案,建議運營商私有云網(wǎng)絡組網(wǎng)分為三層:網(wǎng)絡出口層、核心層和業(yè)務接入層。

    (1)網(wǎng)絡出口層

    網(wǎng)絡出口層負責私有云與外部網(wǎng)絡的互聯(lián),保證資源池內(nèi)部網(wǎng)絡高速訪問互聯(lián)網(wǎng)和IP專用承載網(wǎng),并對資源池內(nèi)網(wǎng)和外網(wǎng)的路由信息進行轉(zhuǎn)換及維護。在網(wǎng)絡出口層部署防火墻,且與核心層防火墻構(gòu)成雙層異構(gòu)。

    (2)核心層

    核心層向下負責匯聚網(wǎng)絡內(nèi)的接入層交換設備,保證網(wǎng)絡內(nèi)接入層交換設備之間的高速交換;向上與出口路由設備進行互聯(lián)。在核心層部署防火墻,用于網(wǎng)絡地址轉(zhuǎn)換并提供安全防護。接入交換機至核心交換機采用全網(wǎng)狀互聯(lián)方式。

    (3)業(yè)務接入層

    業(yè)務接入層包括網(wǎng)絡接入設備、機架式服務器(含計算設備、云存儲和塊存儲設備)。其中,機架式服務器首先接入業(yè)務/存儲接入交換機,接入交換機成對配置。每對計算接入交換機下聯(lián)約40臺計算服務器,以4*40GE鏈路上聯(lián);每對存儲接入交換機下聯(lián)約30臺MPP/Hadoop服務器,以4*40GE鏈路上聯(lián)。

    4 運營商IT系統(tǒng)云化整合建設策略

    云計算技術正在逐步替代傳統(tǒng)IT技術,成為運營商優(yōu)化IT系統(tǒng)及信息基礎設施的重要手段。通過構(gòu)建統(tǒng)一的私有云資源池,推動IT支撐系統(tǒng)與業(yè)務平臺向私有云資源池的遷移,對于運營商實現(xiàn)IT設備資源的集中建設和集中采購、發(fā)揮云計算規(guī)模優(yōu)勢、降低建設和采購成本具有重要意義。

    IT支撐系統(tǒng)與業(yè)務平臺云化整合應遵循“統(tǒng)分兼顧,逐步集中”的建設實施指導原則,初期采用已有平臺改造和新建及擴容系統(tǒng)基于私有云建設的模式展開。

    4.1 IT支撐系統(tǒng)云化整合建設策略

    IT支撐系統(tǒng)多為“交易型數(shù)據(jù)庫”應用(以關系型數(shù)據(jù)庫為核心的實時交易類或批量操作,數(shù)據(jù)處理規(guī)模較大,數(shù)據(jù)關系復雜,對資源的性能和可靠性要求很高)、分析類應用和海量數(shù)據(jù)存儲應用,現(xiàn)網(wǎng)較大比例采用“Unix小型機+高端磁盤陣列”架構(gòu)實現(xiàn)。IT支撐系統(tǒng)云化整合方案建議從小應用整合、分析類應用和海量數(shù)據(jù)存儲系統(tǒng)入手,逐步推進IT支撐系統(tǒng)向私有云遷移。

    (1)BOSS/CRM等關鍵的交易型核心數(shù)據(jù)庫系統(tǒng)對資源的可靠性、性能、安全性等要求很高,建議部署在私有云小型機資源和FC SAN存儲上。

    (2)對于分析類數(shù)據(jù)庫應用,在新建及系統(tǒng)擴容中,積極推動數(shù)據(jù)倉庫由傳統(tǒng)“Unix小型機+高端磁盤陣列”架構(gòu)向基于X86服務器的MPP/Hadoop集群遷移。

    (3)對于Web/APP應用,建議部署在私有云X86計算資源上,利用先進的軟件架構(gòu)與X86服務器技術相結(jié)合,實現(xiàn)Web/APP應用的分布式計算、平行擴展、負載均衡和高穩(wěn)定性。

    4.2 業(yè)務平臺云化整合建設策略

    目前業(yè)務平臺大多數(shù)為“規(guī)模事務類”應用(即并發(fā)請求數(shù)量大且相互獨立,單個請求處理量?。?,這類應用更適合承載在私有云資源池上,且目前多數(shù)業(yè)務平臺已采用X86服務器集群+數(shù)據(jù)庫服務器的部署模式。因此,業(yè)務平臺云化整合方案建議從現(xiàn)有業(yè)務平臺進一步云化改造入手,在系統(tǒng)新建及擴容過程中逐步推進各類業(yè)務平臺向私有云遷移。

    (1)加快運營商各類業(yè)務平臺的X86架構(gòu)改造,逐步將WAP網(wǎng)關、彩信中心、無線城市、短信中心、短信網(wǎng)關、LBS(Location Based Services,位置服務)、短號短信等業(yè)務平臺遷移至私有云X86服務器資源池上。

    (2)新建及擴容業(yè)務平臺全部由私有云承載,并在部署中充分考慮錯峰填谷、安全性、資源共享效率等因素,降低IT建設和維護成本,提高資源利用率,實現(xiàn)業(yè)務的快速申請和上線部署。

    5 結(jié)束語

    與基礎通信網(wǎng)絡不同,IT支撐系統(tǒng)和業(yè)務平臺等IT系統(tǒng)先天就具有集中化的特點。集中化部署是業(yè)界發(fā)展趨勢,也是運營商實現(xiàn)“低成本高效運營”的重要手段。云計算的基本思想是“集中力量辦大事”,不僅技術本身具有集中化優(yōu)勢,而且管理流程上也提出集中化要求?;谒接性萍谐休d原有IT支撐系統(tǒng)和業(yè)務平臺,可以實現(xiàn)IT系統(tǒng)集中化整合,靈活快速地為應用系統(tǒng)提供硬件資源,滿足應用系統(tǒng)的彈性資源需求,從而有效促進運營商IT系統(tǒng)集中化戰(zhàn)略的實施,提高資源的利用效率,降低對能源的消耗和后期運營成本,最終實現(xiàn)節(jié)能減排的目標。

    參考文獻:

    [1] 劉芹,劉玲,畢曉飛. 業(yè)務平臺云遷移方案的探討[J]. 電信工程技術與標準化, 2012,25(4): 35-38.

    [2] 丁淵. 基于云計算的電信IT支撐系統(tǒng)研究[J]. 電腦與電信, 2010(8): 42-43.

    [3] 倪曉熔. 電信運營商IT支撐云計算資源池建設方案[J]. 電信工程技術與標準化, 2012,25(4): 49-53.

    [4] 喻朝新,陳墩金,羅家鋒. 云計算在IT支撐系統(tǒng)應用的實現(xiàn)[J]. 數(shù)據(jù)通信, 2013(2): 12-15.

    [5] 關德軍,周卓然,李俊義. 企業(yè)私有云建設經(jīng)驗與進一步融合思考[J]. 電信技術, 2013(11): 50-52.endprint

    猜你喜歡
    小型機云化運營商
    5G/云化下的VR產(chǎn)業(yè)未來
    商周刊(2018年22期)2018-11-02 06:05:28
    面向云化的核心網(wǎng)架構(gòu)分析
    電子測試(2017年11期)2017-12-15 08:57:23
    IBM中國企業(yè)云化實踐中心成立
    民航空管大數(shù)據(jù)存儲下AIX服務器快速恢復方法
    Oracle集群常見故障三例
    核心網(wǎng)云化技術的分析
    取消“漫游費”只能等運營商“良心發(fā)現(xiàn)”?
    消費者報道(2016年3期)2016-02-28 19:07:30
    第一章 在腐敗火上烤的三大運營商
    IT時代周刊(2015年9期)2015-11-11 05:51:43
    三大運營商換帥不是一個簡單的巧合
    IT時代周刊(2015年9期)2015-11-11 05:51:27
    三大運營商換帥
    IT時代周刊(2015年9期)2015-11-11 05:51:24
    人人妻人人澡欧美一区二区| 日本 欧美在线| 国产视频内射| 无限看片的www在线观看| 大型黄色视频在线免费观看| 午夜福利免费观看在线| 99精品久久久久人妻精品| 成人18禁在线播放| 老熟妇乱子伦视频在线观看| 国内揄拍国产精品人妻在线 | 操出白浆在线播放| 日日夜夜操网爽| 国产亚洲精品久久久久久毛片| 日韩成人在线观看一区二区三区| 听说在线观看完整版免费高清| 桃红色精品国产亚洲av| 久久久久久久久免费视频了| 国产99白浆流出| 一区二区日韩欧美中文字幕| 午夜亚洲福利在线播放| 亚洲第一欧美日韩一区二区三区| 国产熟女xx| 嫩草影视91久久| 男女床上黄色一级片免费看| 最近在线观看免费完整版| 成人18禁高潮啪啪吃奶动态图| 亚洲色图av天堂| 亚洲第一av免费看| 满18在线观看网站| 人妻久久中文字幕网| 亚洲专区字幕在线| 美女大奶头视频| a级毛片a级免费在线| tocl精华| 精品久久久久久久人妻蜜臀av| 亚洲一区二区三区色噜噜| 两个人免费观看高清视频| 18禁美女被吸乳视频| 亚洲欧美激情综合另类| 久久精品亚洲精品国产色婷小说| 亚洲自拍偷在线| 露出奶头的视频| 亚洲人成电影免费在线| 9191精品国产免费久久| 国产亚洲精品第一综合不卡| 国产黄色小视频在线观看| xxxwww97欧美| 国产伦一二天堂av在线观看| 国产又爽黄色视频| av超薄肉色丝袜交足视频| 国产亚洲欧美精品永久| 一级a爱视频在线免费观看| 日韩精品免费视频一区二区三区| 久久精品91无色码中文字幕| 精品久久久久久久久久免费视频| 成人av一区二区三区在线看| 亚洲精品美女久久久久99蜜臀| 男人的好看免费观看在线视频 | av免费在线观看网站| 久久亚洲精品不卡| 日韩高清综合在线| 日韩大尺度精品在线看网址| 伊人久久大香线蕉亚洲五| 亚洲精品美女久久av网站| 真人一进一出gif抽搐免费| 50天的宝宝边吃奶边哭怎么回事| 欧美日韩黄片免| 欧美黄色片欧美黄色片| a在线观看视频网站| 国产av一区在线观看免费| 777久久人妻少妇嫩草av网站| 久久狼人影院| 一本久久中文字幕| 麻豆一二三区av精品| 999久久久国产精品视频| 国产三级黄色录像| 国产97色在线日韩免费| 久久久久国产精品人妻aⅴ院| 一级a爱片免费观看的视频| 免费看美女性在线毛片视频| 久久久久国产一级毛片高清牌| 美女国产高潮福利片在线看| av在线播放免费不卡| 亚洲av熟女| 午夜福利成人在线免费观看| 一边摸一边做爽爽视频免费| 国产亚洲欧美在线一区二区| 欧美黄色淫秽网站| 日本熟妇午夜| 黄色女人牲交| 国产欧美日韩一区二区精品| 中文字幕精品免费在线观看视频| 欧美黑人精品巨大| 亚洲成av人片免费观看| 人人妻人人看人人澡| 波多野结衣高清无吗| 欧美性猛交黑人性爽| 99热6这里只有精品| 亚洲中文日韩欧美视频| 美女免费视频网站| 99riav亚洲国产免费| 亚洲欧洲精品一区二区精品久久久| av免费在线观看网站| 亚洲激情在线av| 一边摸一边抽搐一进一小说| 日韩大尺度精品在线看网址| 最好的美女福利视频网| 在线观看午夜福利视频| 窝窝影院91人妻| 天天躁夜夜躁狠狠躁躁| 亚洲精品国产一区二区精华液| 少妇 在线观看| 久久精品国产清高在天天线| 国产真实乱freesex| 成人精品一区二区免费| 国产一区在线观看成人免费| 两性夫妻黄色片| 久久青草综合色| 亚洲国产欧美日韩在线播放| 欧美激情高清一区二区三区| 人妻久久中文字幕网| 一二三四在线观看免费中文在| 男女做爰动态图高潮gif福利片| 一个人观看的视频www高清免费观看 | 精品福利观看| 免费高清视频大片| e午夜精品久久久久久久| 久久久久免费精品人妻一区二区 | 精品熟女少妇八av免费久了| 熟妇人妻久久中文字幕3abv| 男女下面进入的视频免费午夜 | 欧美 亚洲 国产 日韩一| 午夜a级毛片| 大香蕉久久成人网| 在线观看舔阴道视频| 国产精品香港三级国产av潘金莲| 1024手机看黄色片| 在线十欧美十亚洲十日本专区| 日韩欧美一区视频在线观看| 欧美日韩一级在线毛片| 日韩精品中文字幕看吧| 十八禁网站免费在线| 亚洲人成电影免费在线| 两性午夜刺激爽爽歪歪视频在线观看 | 国产91精品成人一区二区三区| 91国产中文字幕| 国产激情欧美一区二区| 99re在线观看精品视频| 国产真实乱freesex| 搡老熟女国产l中国老女人| 99re在线观看精品视频| 久久香蕉激情| 国产伦在线观看视频一区| 午夜福利欧美成人| 在线观看免费午夜福利视频| 搞女人的毛片| 国产精品一区二区三区四区久久 | 国产午夜福利久久久久久| 国产精品九九99| 国内精品久久久久久久电影| 手机成人av网站| 亚洲,欧美精品.| 麻豆国产av国片精品| 日日摸夜夜添夜夜添小说| 欧美日本亚洲视频在线播放| 色精品久久人妻99蜜桃| 亚洲精品av麻豆狂野| 亚洲美女黄片视频| 亚洲五月婷婷丁香| 一本大道久久a久久精品| 久久精品夜夜夜夜夜久久蜜豆 | 亚洲欧美激情综合另类| 在线观看免费视频日本深夜| 久久久精品欧美日韩精品| 美女扒开内裤让男人捅视频| 国产一级毛片七仙女欲春2 | 国产99白浆流出| 国产一区二区三区在线臀色熟女| 国产片内射在线| 少妇粗大呻吟视频| 亚洲黑人精品在线| 看黄色毛片网站| 日韩 欧美 亚洲 中文字幕| 国产亚洲av嫩草精品影院| 波多野结衣巨乳人妻| 一a级毛片在线观看| 最近在线观看免费完整版| 国产成+人综合+亚洲专区| 国产又色又爽无遮挡免费看| 无人区码免费观看不卡| 色老头精品视频在线观看| 美女高潮喷水抽搐中文字幕| 十分钟在线观看高清视频www| 国产乱人伦免费视频| 天堂动漫精品| 色综合欧美亚洲国产小说| 日本黄色视频三级网站网址| 搡老妇女老女人老熟妇| 99精品在免费线老司机午夜| 国产免费av片在线观看野外av| 热99re8久久精品国产| 老司机在亚洲福利影院| 99国产综合亚洲精品| 欧美国产日韩亚洲一区| 伊人久久大香线蕉亚洲五| 国产精品久久久久久人妻精品电影| 亚洲在线自拍视频| 亚洲片人在线观看| 中文字幕精品亚洲无线码一区 | 黄色视频,在线免费观看| www.熟女人妻精品国产| 色在线成人网| 亚洲成人久久爱视频| 在线十欧美十亚洲十日本专区| 男女床上黄色一级片免费看| 国产亚洲欧美精品永久| 2021天堂中文幕一二区在线观 | 欧美+亚洲+日韩+国产| 欧美zozozo另类| 99精品在免费线老司机午夜| 国产一卡二卡三卡精品| 在线av久久热| 久久久久久人人人人人| a在线观看视频网站| 亚洲av片天天在线观看| 日韩欧美一区二区三区在线观看| 国产亚洲欧美98| 少妇 在线观看| 90打野战视频偷拍视频| 中文在线观看免费www的网站 | 免费高清在线观看日韩| 久久人妻av系列| 久久久久亚洲av毛片大全| 久久精品91无色码中文字幕| 99久久99久久久精品蜜桃| 国产蜜桃级精品一区二区三区| 99久久国产精品久久久| 成人特级黄色片久久久久久久| a级毛片a级免费在线| 日本三级黄在线观看| 午夜视频精品福利| 高清毛片免费观看视频网站| 欧美日韩瑟瑟在线播放| 亚洲av电影在线进入| 国产片内射在线| 国产精品影院久久| 给我免费播放毛片高清在线观看| 免费在线观看视频国产中文字幕亚洲| 美女高潮到喷水免费观看| 成熟少妇高潮喷水视频| av天堂在线播放| 成人手机av| 99国产精品一区二区三区| 在线天堂中文资源库| 亚洲人成电影免费在线| 精品一区二区三区视频在线观看免费| 麻豆av在线久日| 91在线观看av| 长腿黑丝高跟| svipshipincom国产片| 夜夜看夜夜爽夜夜摸| 黄色视频,在线免费观看| 最近最新中文字幕大全电影3 | 日本一区二区免费在线视频| 亚洲电影在线观看av| 免费看美女性在线毛片视频| 一级毛片精品| 岛国视频午夜一区免费看| 女人被狂操c到高潮| 身体一侧抽搐| a级毛片在线看网站| 在线国产一区二区在线| 日韩欧美三级三区| 午夜久久久久精精品| 美女大奶头视频| 日本一区二区免费在线视频| 亚洲熟女毛片儿| 少妇裸体淫交视频免费看高清 | 成人永久免费在线观看视频| 啦啦啦 在线观看视频| 级片在线观看| 99re在线观看精品视频| 国产精品亚洲av一区麻豆| 国产午夜福利久久久久久| 色播亚洲综合网| 亚洲av成人一区二区三| 免费高清视频大片| 精品第一国产精品| 亚洲片人在线观看| 99久久综合精品五月天人人| 人人妻,人人澡人人爽秒播| 制服诱惑二区| 国产午夜福利久久久久久| 少妇裸体淫交视频免费看高清 | 日韩大码丰满熟妇| 国产又黄又爽又无遮挡在线| 精品不卡国产一区二区三区| 视频区欧美日本亚洲| www.熟女人妻精品国产| 国产一区二区三区视频了| or卡值多少钱| 亚洲成国产人片在线观看| 变态另类成人亚洲欧美熟女| АⅤ资源中文在线天堂| av片东京热男人的天堂| 亚洲国产精品合色在线| 99热只有精品国产| 最近在线观看免费完整版| 精品国产国语对白av| 搡老岳熟女国产| 精品久久久久久久末码| 一本精品99久久精品77| 亚洲 欧美 日韩 在线 免费| 亚洲成av片中文字幕在线观看| 亚洲一卡2卡3卡4卡5卡精品中文| 一区二区三区国产精品乱码| av中文乱码字幕在线| 国产伦人伦偷精品视频| 亚洲男人的天堂狠狠| 成年版毛片免费区| 精品国产美女av久久久久小说| 制服诱惑二区| 不卡av一区二区三区| 91麻豆精品激情在线观看国产| 欧美人与性动交α欧美精品济南到| 手机成人av网站| 一夜夜www| 欧美乱码精品一区二区三区| 国产精品精品国产色婷婷| 久久国产亚洲av麻豆专区| 日韩欧美三级三区| 亚洲天堂国产精品一区在线| 1024香蕉在线观看| xxx96com| 欧美黑人欧美精品刺激| 欧美久久黑人一区二区| 亚洲av美国av| 久久热在线av| 亚洲,欧美精品.| 亚洲欧洲精品一区二区精品久久久| 男女下面进入的视频免费午夜 | 一区二区三区高清视频在线| 操出白浆在线播放| www.自偷自拍.com| 99久久国产精品久久久| 神马国产精品三级电影在线观看 | 国产激情偷乱视频一区二区| 亚洲国产欧洲综合997久久, | 90打野战视频偷拍视频| 一区二区三区国产精品乱码| videosex国产| 一级毛片精品| 免费高清视频大片| 免费观看精品视频网站| 黄片小视频在线播放| 欧洲精品卡2卡3卡4卡5卡区| 国产一区在线观看成人免费| 首页视频小说图片口味搜索| 久久国产乱子伦精品免费另类| 日本一区二区免费在线视频| 男人舔女人的私密视频| 18禁黄网站禁片午夜丰满| 国产午夜福利久久久久久| 又大又爽又粗| 欧美成人午夜精品| 麻豆av在线久日| 黄色成人免费大全| 啪啪无遮挡十八禁网站| 欧美日韩瑟瑟在线播放| 免费女性裸体啪啪无遮挡网站| 在线国产一区二区在线| 国产一区二区三区在线臀色熟女| 91在线观看av| 亚洲人成77777在线视频| 真人做人爱边吃奶动态| 露出奶头的视频| 成人精品一区二区免费| 亚洲精品美女久久av网站| 国产亚洲欧美精品永久| 精品日产1卡2卡| 国产精品永久免费网站| 在线观看免费视频日本深夜| 久久久水蜜桃国产精品网| 精品午夜福利视频在线观看一区| 亚洲五月色婷婷综合| 女性生殖器流出的白浆| 精品欧美一区二区三区在线| 亚洲国产高清在线一区二区三 | 后天国语完整版免费观看| 亚洲va日本ⅴa欧美va伊人久久| 久久久水蜜桃国产精品网| 亚洲国产中文字幕在线视频| 久久久久久九九精品二区国产 | 两性夫妻黄色片| 国产精品国产高清国产av| 黄色视频不卡| 日本在线视频免费播放| 免费看a级黄色片| 男人操女人黄网站| 欧美不卡视频在线免费观看 | 老鸭窝网址在线观看| 精品福利观看| 亚洲成av人片免费观看| 18禁观看日本| 97超级碰碰碰精品色视频在线观看| 女人高潮潮喷娇喘18禁视频| 免费看日本二区| 国产成人系列免费观看| 日本三级黄在线观看| 在线永久观看黄色视频| 淫妇啪啪啪对白视频| 国产精品九九99| 亚洲午夜理论影院| 男女之事视频高清在线观看| 亚洲精品一卡2卡三卡4卡5卡| 亚洲精华国产精华精| 黄网站色视频无遮挡免费观看| 麻豆av在线久日| 国产亚洲av高清不卡| 两性夫妻黄色片| 少妇粗大呻吟视频| 国产视频内射| 亚洲国产看品久久| 国产高清videossex| 国产私拍福利视频在线观看| 精品国产乱子伦一区二区三区| 国产亚洲欧美在线一区二区| 中文字幕精品免费在线观看视频| 男女视频在线观看网站免费 | 亚洲片人在线观看| 亚洲国产精品久久男人天堂| 久久天堂一区二区三区四区| 午夜免费鲁丝| 欧美性猛交黑人性爽| 在线国产一区二区在线| 黄频高清免费视频| 成人国产综合亚洲| www.www免费av| 精品国产超薄肉色丝袜足j| av福利片在线| 亚洲一区二区三区色噜噜| 欧美人与性动交α欧美精品济南到| 午夜福利高清视频| 夜夜夜夜夜久久久久| 97人妻精品一区二区三区麻豆 | 亚洲国产精品999在线| 成人三级做爰电影| 久久中文看片网| 日日夜夜操网爽| 国产精品精品国产色婷婷| www日本在线高清视频| a级毛片在线看网站| 亚洲三区欧美一区| 可以在线观看的亚洲视频| 国产三级在线视频| 美女扒开内裤让男人捅视频| 亚洲精品在线观看二区| 一二三四在线观看免费中文在| 日本a在线网址| 免费一级毛片在线播放高清视频| 黄色女人牲交| 特大巨黑吊av在线直播 | 国产精品久久久久久人妻精品电影| 看片在线看免费视频| 一二三四社区在线视频社区8| 一级毛片精品| 免费观看人在逋| 白带黄色成豆腐渣| 亚洲精品久久国产高清桃花| 亚洲一区二区三区色噜噜| 国产国语露脸激情在线看| 久久人人精品亚洲av| 色av中文字幕| 欧美黄色片欧美黄色片| 黄色毛片三级朝国网站| 久久精品国产亚洲av高清一级| 亚洲一区中文字幕在线| 久久九九热精品免费| 精品电影一区二区在线| 欧美丝袜亚洲另类 | 国产激情久久老熟女| 一进一出好大好爽视频| 一本精品99久久精品77| 国产主播在线观看一区二区| 色av中文字幕| 亚洲精品色激情综合| 看片在线看免费视频| 少妇裸体淫交视频免费看高清 | 老汉色∧v一级毛片| 精品一区二区三区四区五区乱码| 国产野战对白在线观看| 久久伊人香网站| 亚洲,欧美精品.| 色综合婷婷激情| 欧美成人性av电影在线观看| 一级黄色大片毛片| 久9热在线精品视频| 国产av在哪里看| 精品久久蜜臀av无| avwww免费| 亚洲天堂国产精品一区在线| 国产三级黄色录像| 欧美精品啪啪一区二区三区| 日韩高清综合在线| 嫩草影视91久久| 欧美另类亚洲清纯唯美| 99在线人妻在线中文字幕| av电影中文网址| 色播亚洲综合网| 欧美日韩黄片免| 97超级碰碰碰精品色视频在线观看| avwww免费| 夜夜躁狠狠躁天天躁| 黑丝袜美女国产一区| 手机成人av网站| 国产熟女午夜一区二区三区| 国产成人系列免费观看| 精品一区二区三区av网在线观看| 听说在线观看完整版免费高清| 日本熟妇午夜| 男人操女人黄网站| 国产精品久久久av美女十八| 两个人看的免费小视频| 欧美日韩亚洲综合一区二区三区_| 亚洲五月色婷婷综合| 女警被强在线播放| 久久精品aⅴ一区二区三区四区| 免费在线观看日本一区| 男女之事视频高清在线观看| 麻豆久久精品国产亚洲av| 成年免费大片在线观看| 91麻豆精品激情在线观看国产| 久久久久久久久中文| 夜夜爽天天搞| 999久久久国产精品视频| 欧美成人免费av一区二区三区| 亚洲国产欧洲综合997久久, | 久久性视频一级片| 日本五十路高清| 中文字幕最新亚洲高清| videosex国产| 变态另类成人亚洲欧美熟女| 黄色片一级片一级黄色片| av欧美777| 亚洲av中文字字幕乱码综合 | 免费在线观看影片大全网站| 中出人妻视频一区二区| 他把我摸到了高潮在线观看| 99国产精品99久久久久| 久久亚洲真实| 亚洲 国产 在线| 成人18禁在线播放| 久久久久久大精品| 欧美不卡视频在线免费观看 | 亚洲精品av麻豆狂野| 日日干狠狠操夜夜爽| 亚洲中文字幕一区二区三区有码在线看 | 欧美在线黄色| 一级毛片女人18水好多| 亚洲aⅴ乱码一区二区在线播放 | 久久久久久久午夜电影| 一级a爱视频在线免费观看| 很黄的视频免费| 国产精品,欧美在线| 99国产精品99久久久久| 亚洲国产欧美一区二区综合| 亚洲精品在线观看二区| 最近最新中文字幕大全电影3 | 亚洲av片天天在线观看| 俺也久久电影网| 亚洲美女黄片视频| 国内精品久久久久精免费| 国产成人精品无人区| 99久久久亚洲精品蜜臀av| 精品日产1卡2卡| 久久久久久国产a免费观看| 一二三四在线观看免费中文在| aaaaa片日本免费| 欧美黑人欧美精品刺激| 欧美精品啪啪一区二区三区| 免费在线观看黄色视频的| 日本 av在线| 在线观看舔阴道视频| 久久九九热精品免费| 99re在线观看精品视频| 一区二区三区国产精品乱码| 桃红色精品国产亚洲av| 国产又爽黄色视频| 久久国产亚洲av麻豆专区| 亚洲精品久久国产高清桃花| 成人三级黄色视频| 成人一区二区视频在线观看| 人成视频在线观看免费观看| 亚洲专区中文字幕在线| 欧美大码av| 狠狠狠狠99中文字幕| 一进一出抽搐gif免费好疼| 亚洲男人的天堂狠狠| 亚洲性夜色夜夜综合| 欧美日韩黄片免| 国产激情久久老熟女| 亚洲人成77777在线视频| 国产一区二区三区视频了| 午夜福利成人在线免费观看| 90打野战视频偷拍视频| 欧美三级亚洲精品| www.精华液| 国产精品av久久久久免费| 色哟哟哟哟哟哟| 熟女少妇亚洲综合色aaa.| av在线天堂中文字幕| 悠悠久久av| 正在播放国产对白刺激| 一夜夜www| 神马国产精品三级电影在线观看 |