• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    系統(tǒng)虛擬化技術(shù)性能評(píng)測(cè)*

    2010-06-11 11:03:40蘭雨晴宋瀟豫馬立克
    電信科學(xué) 2010年1期
    關(guān)鍵詞:測(cè)試程序評(píng)測(cè)內(nèi)核

    蘭雨晴 ,宋瀟豫 ,馬立克 ,徐 舫

    (1.北京航空航天大學(xué)計(jì)算機(jī)學(xué)院 北京100191;2.上海中標(biāo)軟件有限公司創(chuàng)新中心 北京100190)

    1 引言

    計(jì)算機(jī)平臺(tái)的虛擬化技術(shù)已有40多年的歷史,它起源于對(duì)分時(shí)操作系統(tǒng)的研究[1]。最早使用虛擬化技術(shù)的IBM7044計(jì)算機(jī)能夠在一臺(tái)物理機(jī)上運(yùn)行多個(gè)獨(dú)立客戶操作系統(tǒng)系統(tǒng),目的是為了讓用戶盡可能地充分利用昂貴的大型機(jī)資源。虛擬機(jī)技術(shù)是在軟、硬件之間引入虛擬層,可為應(yīng)用程序提供獨(dú)立的運(yùn)行環(huán)境,屏蔽硬件平臺(tái)的動(dòng)態(tài)性、分布性和異構(gòu)性,支持硬件資源的共享和復(fù)用,并為每個(gè)用戶提供屬于個(gè)人的獨(dú)立、隔離的計(jì)算環(huán)境,同時(shí),為管理員提供硬件資源和軟件資源的集中管理[2]。

    隨著x86處理器性能的提升和應(yīng)用的普及,虛擬化技術(shù)在x86平臺(tái)上得到了迅速的發(fā)展和廣泛的應(yīng)用。虛擬化技術(shù)目前的主要用途是測(cè)試開發(fā)以及服務(wù)器資源整合。

    虛擬化技術(shù)按照不同的實(shí)現(xiàn)方式可以分為全虛擬化(full virtualization)、半虛擬化(paravirtualization)和硬件輔助虛擬化(hardware assisted virtualization)。全虛擬化和半虛擬化主要通過(guò)軟件方式實(shí)現(xiàn)虛擬化,全虛擬化采用二進(jìn)制代碼動(dòng)態(tài)翻譯(dynamic binary translation)技術(shù)訪問(wèn)虛擬硬件,半虛擬化技術(shù)將敏感指令替換為對(duì)虛擬機(jī)監(jiān)控器的超級(jí)調(diào)用(hypercall),避免每條指令的翻譯,但這兩種方式都會(huì)帶來(lái)一定程度的性能開銷。近年來(lái),Intel和AMD在硬件級(jí)上對(duì)虛擬化技術(shù)予以支持,如Intel的VT(virtualization technology,虛擬化技術(shù),也曾叫做vanderpool technology)和AMD 的 SVM(secure virtual machine,安全虛擬機(jī))技術(shù),虛擬機(jī)的處理器性能和I/O(input/output,輸入輸出)性能有了明顯的提升,硬件輔助虛擬化技術(shù)因其具有接近物理機(jī)甚至在某些方面超越物理機(jī)的性能而被學(xué)術(shù)界和工業(yè)界廣泛關(guān)注。

    企業(yè)或者科研機(jī)構(gòu)在面對(duì)種類繁多、各有特點(diǎn)的虛擬化技術(shù)時(shí),往往比較關(guān)注虛擬化技術(shù)的性能問(wèn)題。首先,應(yīng)用程序運(yùn)行在虛擬機(jī)上與直接運(yùn)行在物理機(jī)上性能上的差異有多少;其次,虛擬化的各種技術(shù)實(shí)現(xiàn)提供的性能是否存在很大的差異。本文正是針對(duì)目前普遍關(guān)注的虛擬機(jī)CPU性能和I/O性能等展開了一系列的標(biāo)準(zhǔn)性能測(cè)試,包括編譯內(nèi)核、磁盤讀寫、文件壓縮、網(wǎng)絡(luò)傳輸、Sysbench、Unixbench等。本文第2節(jié)概述虛擬化技術(shù),第3節(jié)給出了測(cè)試工具和測(cè)試方法的具體描述,第4節(jié)分析了基準(zhǔn)測(cè)試結(jié)果,最后在第5節(jié)對(duì)上述工作進(jìn)行了總結(jié)。

    2 虛擬化技術(shù)概述

    1974年,Popek和Goldberg[3]提出經(jīng)典系統(tǒng)虛擬化模型,該模型指出操作系統(tǒng)成為虛擬機(jī)監(jiān)控器(virtual machine monitor,VMM)的基本要求:CPU的指令集體系結(jié)構(gòu)中,敏感指令必須是特權(quán)指令的子集。這種特性使得只有當(dāng)客戶操作系統(tǒng)執(zhí)行敏感指令時(shí),VMM才會(huì)陷入到0特權(quán)級(jí)去執(zhí)行敏感指令。然而目前流行的x86架構(gòu)并不能適用于這種模型,x86指令集中有一部分敏感指令不是特權(quán)指令[4],有17條敏感指令(比如LGDT等)不屬于特權(quán)指令,這些敏感指令在低特權(quán)級(jí)下運(yùn)行不會(huì)發(fā)生陷入,這就使得VMM無(wú)法有選擇性地陷入指令而減少VMM帶來(lái)的性能損失。

    x86在構(gòu)架上的缺陷使得x86平臺(tái)虛擬化的實(shí)現(xiàn)存在困難和挑戰(zhàn),一些學(xué)者和工程師另辟蹊徑采用純軟件的方法來(lái)彌補(bǔ)x86體系結(jié)構(gòu)固有的虛擬化缺陷。在CPU虛擬化方面,全虛擬化技術(shù)(full virtualization)使用軟件的方法完全或者部分的模擬出底層計(jì)算機(jī)硬件,不需要修改客戶操作系統(tǒng)(guest OS)的內(nèi)核,客戶操作系統(tǒng)完全感知不到自己運(yùn)行在虛擬的硬件之上,通過(guò)二進(jìn)制代碼動(dòng)態(tài)翻譯(dynamic binary translation)核心指令來(lái)替代那些不能虛擬化的指令,使用翻譯后的指令訪問(wèn)虛擬硬件。在內(nèi)存虛擬化方面,全虛擬化技術(shù)為每個(gè)Guest都維護(hù)一個(gè)“影子頁(yè)表”,在這個(gè)表中寫入虛擬化之后的內(nèi)存地址映射關(guān)系,而Guest OS的頁(yè)表則無(wú)需變動(dòng),最后,VMM將影子頁(yè)表交給MMU(memory management unit,內(nèi)存管理單元)進(jìn)行地址轉(zhuǎn)換。在I/O虛擬化方面,全虛擬化技術(shù)通過(guò)模擬I/O設(shè)備(磁盤和網(wǎng)卡等)來(lái)實(shí)現(xiàn)虛擬化。對(duì)Guest OS而言,它所能看到就是一組統(tǒng)一的I/O設(shè)備,同時(shí)Guest OS每次I/O操作都會(huì)陷入到VMM,讓VMM來(lái)執(zhí)行。這種方式對(duì)Guest而言,非常透明,無(wú)需顧忌底層硬件。采用全虛擬化技術(shù)的典型系統(tǒng)有:Virtual Box、VMware Workstation、VMware ESX Server、Virtual PC、QEMU[5]等。

    半虛擬化技術(shù) (para-virtualization)在CPU虛擬化方面,通過(guò)修改客戶操作系統(tǒng)的內(nèi)核源代碼,將客戶操作系統(tǒng)的指令操作替換為對(duì)虛擬機(jī)監(jiān)控器的超級(jí)調(diào)用(hypercall),客戶操作系統(tǒng)知道自身運(yùn)行在一個(gè)虛擬化的硬件系統(tǒng)之上[5],并且被要求與虛擬機(jī)監(jiān)控器相互協(xié)調(diào)與合作。在內(nèi)存虛擬化方面,半虛擬化技術(shù)采用頁(yè)表寫入法,當(dāng)Guest OS創(chuàng)建一個(gè)新的頁(yè)表時(shí),其會(huì)向VMM注冊(cè)該頁(yè)表,之后在Guest運(yùn)行的時(shí)候,VMM將不斷地管理和維護(hù)這個(gè)表,使Guest上面的程序能直接訪問(wèn)到合適的地址。在I/O虛擬化方面,半虛擬化技術(shù)通過(guò)前端(front-end)/后端(back-end)架構(gòu),將Guest的I/O請(qǐng)求通過(guò)一個(gè)環(huán)狀隊(duì)列傳遞到特權(quán)域(privileged domain,也被稱為Domain-0)。采用半虛擬化技術(shù)的產(chǎn)品有Xen的半虛擬化產(chǎn)品。

    硬件輔助虛擬化技術(shù)彌補(bǔ)了x86體系結(jié)構(gòu)虛擬化的缺陷,在CPU虛擬化方面,Intel VT技術(shù)和AMD SVM技術(shù)對(duì)處理器硬件進(jìn)行了擴(kuò)展,通過(guò)引入根模式和非根模式來(lái)分別運(yùn)行VMM以及客戶操作系統(tǒng),VMM和客戶操作系統(tǒng)分別運(yùn)行在根模式和非根模式的0特權(quán)級(jí)上,只有客戶操作系統(tǒng)在執(zhí)行敏感指令時(shí),才產(chǎn)生根模式與非根模式的切換,系統(tǒng)會(huì)切換到運(yùn)行于根模式的VMM,讓VMM來(lái)處理這些特殊指令。在內(nèi)存虛擬化方面,硬件輔助虛擬化技術(shù)使用擴(kuò)展頁(yè)表(extended page table,EPT),EPT 通過(guò)使用硬件技術(shù),使其能在原有的頁(yè)表的基礎(chǔ)上,增加了一個(gè)EPT頁(yè)表,通過(guò)這個(gè)頁(yè)表能夠?qū)uest的物理地址直接翻譯為物理機(jī)的物理地址,從而減低整個(gè)內(nèi)存虛擬化所需的開銷。在I/O虛擬化方面,有 Intel的VT-d、AMD的IOMMU(input/output memory management unit,輸入輸出內(nèi)存管理單元)和PCI-SIG的 IOV(I/O virtulization,輸入輸出虛擬化)這三個(gè)技術(shù)。VT-d,其核心思想就是讓虛擬機(jī)能直接使用物理設(shè)備,但是這會(huì)牽涉到I/O地址訪問(wèn)和DMA(direct memory access,直接存儲(chǔ)器訪問(wèn))的問(wèn)題,而VT-d通過(guò)采用DMA重映射 (remapping)和I/O頁(yè)表來(lái)解決這兩個(gè)問(wèn)題,從而讓虛擬機(jī)能直接訪問(wèn)物理設(shè)備。IOMMU和VT-d在技術(shù)上有很多相似之處。目前硬件輔助虛擬化技術(shù)已經(jīng)獲得了接近原生操作系統(tǒng)的高性能,主要的技術(shù)有KVM(kernel virtual machine)和硬件輔助虛擬化的Xen。

    之前提到各種虛擬化技術(shù)是在硬件層次上的虛擬化,主要通過(guò)軟件或者硬件輔助的方法實(shí)現(xiàn)物理機(jī)與虛擬機(jī)的隔離,虛擬機(jī)能夠直接對(duì)物理機(jī)的資源進(jìn)行訪問(wèn)。而目前也存在比較流行的操作系統(tǒng)級(jí) (OS Level)的虛擬化技術(shù),為用戶提供了一個(gè)獨(dú)立完整的操作系統(tǒng)環(huán)境,包括操作系統(tǒng)、用戶函數(shù)庫(kù)、文件系統(tǒng)和環(huán)境設(shè)置等。客戶操作系統(tǒng)運(yùn)行在宿主操作系統(tǒng)之上,虛擬機(jī)可以是對(duì)物理機(jī)資源的分區(qū)或者僅僅是一個(gè)容器,復(fù)制了宿主操作系統(tǒng)的環(huán)境。由于所有物理機(jī)和虛擬機(jī)的操作系統(tǒng)只運(yùn)行了一個(gè)內(nèi)核,沒有虛擬機(jī)監(jiān)控器中間層的運(yùn)行開銷,操作系統(tǒng)級(jí)的虛擬化技術(shù)具有優(yōu)秀的性能。操作系統(tǒng)級(jí)的虛擬化代表系統(tǒng)有Linux-VServer和OpenVZ。但是目前操作系統(tǒng)級(jí)的虛擬化技術(shù)因其穩(wěn)定性、易用性以及可管理性等方面均存在不足之處,并且無(wú)法與其他虛擬化技術(shù)一樣安裝部署主流的企業(yè)級(jí)服務(wù)器操作系統(tǒng),無(wú)法構(gòu)建統(tǒng)一的比較測(cè)試環(huán)境,因此本次評(píng)測(cè)沒有將Linux-VServer和OpenVZ列入待比較的虛擬化技術(shù)之中。

    3 評(píng)測(cè)方法

    無(wú)論是在學(xué)術(shù)界還是在工業(yè)界,對(duì)于什么樣的方法是評(píng)測(cè)虛擬化解決方案的最好方法,一直沒有達(dá)成共識(shí)。標(biāo)準(zhǔn)性能評(píng)測(cè)公司(standard performance evaluation corporation,SPEC)在2006年底成立了一個(gè)委員會(huì)專門研究虛擬化解決方案評(píng)測(cè)方法[7]。VMware和Intel都是該委員會(huì)的成員,并且走在研究前沿,已經(jīng)發(fā)布了兩款不同的基準(zhǔn)測(cè)試程序套件(或稱工作負(fù)載,因?yàn)閮蓚€(gè)套件都是由現(xiàn)存的、獨(dú)立的基準(zhǔn)測(cè)試程序組成的),分別叫做VMmark[8]和vConsolidate[9]。組成兩個(gè)套件的工作負(fù)載非常相似,區(qū)別只是在于每個(gè)公司根據(jù)合成得到的結(jié)果來(lái)定義一個(gè)評(píng)分系統(tǒng)的方式。但是在本次研究中,兩款基準(zhǔn)測(cè)試程序套件都未被采用,因?yàn)樗鼈兌家蕾囉谝粋€(gè)針對(duì)郵件服務(wù)器的,叫做LoadSim的基準(zhǔn)測(cè)試程序,這個(gè)基準(zhǔn)測(cè)試程序只能配合微軟的Exchange Server使用。

    本文的評(píng)測(cè)沒有使用專門面向虛擬環(huán)境的性能評(píng)測(cè)工具,而是重用了傳統(tǒng)操作系統(tǒng)的性能評(píng)測(cè)工具,因?yàn)槠胀ㄓ脩糇顬殛P(guān)注的問(wèn)題是:(1)虛擬機(jī)能否達(dá)到物理機(jī)的性能;(2)虛擬機(jī)與物理機(jī)相比性能損失有多少;(3)各種虛擬化技術(shù)孰優(yōu)孰劣。因此,重用傳統(tǒng)操作系統(tǒng)的性能評(píng)測(cè)工具往往能夠得到最為直觀并且有說(shuō)服力的結(jié)果。在選用具體的評(píng)測(cè)工具時(shí),我們主要考慮要從以下三個(gè)方面對(duì)虛擬機(jī)的性能進(jìn)行評(píng)測(cè):客戶機(jī)操作系統(tǒng)上處理器性能指標(biāo);客戶機(jī)操作系統(tǒng)內(nèi)存性能;虛擬外設(shè)I/O的性能。

    在本次測(cè)試中使用上海中標(biāo)軟件有限公司的NeoShine Advance Server 5.4 x86-64作為物理機(jī)和虛擬機(jī)的操作系統(tǒng),它的內(nèi)核版本是2.6.18。在測(cè)試中使用的基準(zhǔn)測(cè)試程序的名稱和版本如表1所示。表2列舉了待評(píng)測(cè)的虛擬化解決方案以及在物理機(jī)和虛擬機(jī)上安裝的操作系統(tǒng)的內(nèi)核版本。

    表1 使用的基準(zhǔn)測(cè)試程序列表

    表2 待評(píng)測(cè)虛擬化解決方案及各自內(nèi)核版本

    所有的測(cè)試在IBM x3650 M2服務(wù)器上進(jìn)行,該服務(wù)器的配置如下:2 個(gè) Intel Xeon CPU E5520(2.26 GHz,16 核),8 GB內(nèi)存,897 GB磁盤陣列和一個(gè)吉比特網(wǎng)卡,該網(wǎng)卡連接到局域網(wǎng)中。在測(cè)試中,虛擬機(jī)的配置如下:1個(gè)CPU,2 GB的內(nèi)存,50 GB的硬盤和一個(gè)網(wǎng)卡。

    對(duì)于結(jié)果的收集方式如下:所有的測(cè)試都重復(fù)4次,拋棄第一次結(jié)果樣本,在第二次、第三次及第四次結(jié)果樣本中選取中位數(shù)作為當(dāng)前的測(cè)試結(jié)果。虛擬機(jī)上的測(cè)試結(jié)果都進(jìn)行標(biāo)準(zhǔn)化處理,即以物理機(jī)上的測(cè)試結(jié)果為基數(shù),將虛擬機(jī)上的測(cè)試結(jié)果轉(zhuǎn)化為相對(duì)于該基數(shù)的比例值。測(cè)試機(jī)在每次進(jìn)行新的測(cè)試集合之前都必須重新啟動(dòng)。在測(cè)試新的虛擬化解決方案之前,重新格式化磁盤并重新安裝操作系統(tǒng)。

    4 評(píng)測(cè)結(jié)果分析

    本部分展示本研究的結(jié)果,所有這些結(jié)果值都是以物理機(jī)上的測(cè)試結(jié)果為基數(shù),經(jīng)過(guò)標(biāo)準(zhǔn)化之后的相對(duì)值。圖1顯示了以時(shí)間為單位的基準(zhǔn)測(cè)試程序的標(biāo)準(zhǔn)化測(cè)試結(jié)果,圖中的條形越高表示該虛擬化解決方案的性能在對(duì)應(yīng)的工作負(fù)載中越好。

    本次測(cè)試采用Bzip2進(jìn)行數(shù)據(jù)壓縮測(cè)試。Bzip2是一個(gè)CPU密集型的任務(wù),只有較低的I/O需求。在Bzip2的測(cè)試中,采用壓縮單個(gè)大文件和壓縮多個(gè)小文件兩種方式來(lái)進(jìn)行壓縮時(shí)間的測(cè)試:Bzip2-1壓縮很大的一個(gè)鏡像文件(Neoshine Advance Server的光盤鏡像ISO文件,4.37 GB),Bzip2-2壓縮有很多小文件的文件夾 (Linux Kernel 2.6.32內(nèi)核源碼樹,包含32 364個(gè)文件,共計(jì)423 MB)。在光盤鏡像壓縮的試驗(yàn)中,只有Virtual Box比較接近物理機(jī)的性能,而在內(nèi)核源碼樹的壓縮試驗(yàn)中,KVM和Virtual Box都比較接近物理機(jī)的性能。

    本測(cè)試中采用dd來(lái)測(cè)試磁盤性能,dd操作對(duì)CPU沒有太大壓力,而是主要集中于磁盤輸入輸出(I/O)操作。在這個(gè)測(cè)試中,我們把一個(gè)4.37 GB的鏡像文件(ISO文件)拷貝到同一個(gè)ext3分區(qū)下。本文評(píng)測(cè)的所有虛擬化解決方案在本測(cè)試中的性能和物理機(jī)相比都不是十分理想,Xen的半虛擬化解決方案相對(duì)來(lái)說(shuō)比其他解決方案略勝一籌。

    Sysbench用來(lái)做數(shù)據(jù)庫(kù)服務(wù)器的一個(gè)基準(zhǔn)測(cè)試程序,我們的測(cè)試中主要是進(jìn)行在線事務(wù)處理(OLTP)測(cè)試,它對(duì)MySQL數(shù)據(jù)庫(kù)中進(jìn)行一組10 000個(gè)事務(wù)處理所耗的時(shí)間。在本測(cè)試中,除了Virtual Box以外,各虛擬化解決方案的表現(xiàn)都相當(dāng)不錯(cuò),性能甚至略微超過(guò)了物理機(jī),Virtual Box相比之下則遜色得多。

    內(nèi)核編譯是一個(gè)綜合性能評(píng)測(cè)方法,內(nèi)核編譯測(cè)試既是處理器敏感型任務(wù),又是內(nèi)存、多線程和對(duì)文件系統(tǒng)的讀寫壓力敏感型的任務(wù),因?yàn)樗诰幾g的過(guò)程中,會(huì)讀寫很多的小文件,這些特征使它成為很好的綜合系統(tǒng)系能指標(biāo)。在本測(cè)試中,測(cè)試編譯Linux Kernel 2.6.32所消耗的時(shí)間。所有的待測(cè)虛擬化解決方案的表現(xiàn)都不錯(cuò),Xen的全虛擬化和半虛擬化的性能都很接近物理機(jī)的性能,而Virtual Box和KVM更是較大幅度地超過(guò)了物理機(jī)的性能。

    圖2顯示了測(cè)試吞吐量的基準(zhǔn)測(cè)試程序的標(biāo)準(zhǔn)化測(cè)試結(jié)果。

    Dbench是一個(gè)文件系統(tǒng)基準(zhǔn)測(cè)試程序,模擬文件服務(wù)器上的工作。在本測(cè)試中,Dbench模擬300個(gè)用戶同時(shí)對(duì)文件服務(wù)器進(jìn)行并發(fā)讀寫操作,其中,Virtual Box的表現(xiàn)相當(dāng)突出,在其他虛擬化解決方案的性能最高只有物理機(jī)性能的40%左右的情況下,它一舉超過(guò)了物理機(jī)的性能達(dá)20%之多。

    Netperf是一個(gè)簡(jiǎn)單的網(wǎng)絡(luò)基準(zhǔn)測(cè)試程序,它使用TCP數(shù)據(jù)包流來(lái)評(píng)測(cè)數(shù)據(jù)交換的性能。在本項(xiàng)測(cè)試中,除了Xen的全虛擬化解決方案性能只有不到物理機(jī)的60%外,其他解決方案都非常接近物理機(jī)的性能。

    在完成Netperf的網(wǎng)絡(luò)測(cè)試以后,本測(cè)試又采用Rsync進(jìn)行了兩項(xiàng)測(cè)試,都是從服務(wù)器端向客戶端同步數(shù)據(jù)。第一項(xiàng)測(cè)試同步內(nèi)核源碼樹,它是一個(gè)包含很多小文件的文件夾,包含32 364個(gè)文件,共計(jì)423 MB。第二項(xiàng)測(cè)試是同步一個(gè)很大的鏡像文件(4.37 GB的ISO文件)。在兩項(xiàng)測(cè)試中,Virtual Box、Xen的半虛擬化和KVM表現(xiàn)都很不錯(cuò),很接近物理機(jī)的性能,而Xen的全虛擬化解決方案則要遜色得多。

    圖2 吞吐量類測(cè)試結(jié)果對(duì)比

    最后,我們還使用UnixBench進(jìn)行了測(cè)試,UnixBench的目的是給類Unix系統(tǒng)的性能分析提供一種基本的指標(biāo),其基于早先的BYTE測(cè)試。因此,多個(gè)測(cè)試被用于測(cè)試系統(tǒng)性能的各個(gè)的方面,包括基本數(shù)學(xué)運(yùn)算、文件系統(tǒng)效率、進(jìn)程間通信、管道吞吐率、shell程序效率等。然后將這些測(cè)試結(jié)果與從基礎(chǔ)系統(tǒng)的分?jǐn)?shù)比較,產(chǎn)生一個(gè)預(yù)定值,這個(gè)預(yù)定值比原始的分?jǐn)?shù)更容易處理。綜合整套系列的預(yù)定值將得出一個(gè)系統(tǒng)全面的索引。在進(jìn)行多項(xiàng)測(cè)試以后,UnixBench會(huì)給出一個(gè)綜合評(píng)分。在該項(xiàng)測(cè)試中,KVM和Virtual Box表現(xiàn)不錯(cuò),都超過(guò)了物理機(jī)性能的60%。

    UnixBench綜合評(píng)分結(jié)果對(duì)比如圖3所示。

    圖3 UnixBench綜合評(píng)分結(jié)果對(duì)比

    5 結(jié)束語(yǔ)

    本文評(píng)測(cè)了Linux下的4款開源虛擬化技術(shù)的基本性能。在研究過(guò)程中,我們使用了一些基準(zhǔn)測(cè)試程序來(lái)分析不同的虛擬化技術(shù)在不同的工作負(fù)載中的性能,并和物理機(jī)上的性能進(jìn)行比較,觀察其開銷。

    BZip2和Sysbench測(cè)試結(jié)果主要體現(xiàn)了客戶操作系統(tǒng)在處理器性能方面的指標(biāo),其中KVM和Virtual Box有較好的表現(xiàn),因此,如果用戶使用虛擬化技術(shù)主要面向處理器密集型的應(yīng)用,需要消耗大量的處理器資源,并且保持處理器調(diào)度的高效率,KVM和Virtual Box是較好的選擇,但是由于Virtual Box是一個(gè)桌面虛擬化系統(tǒng),因此在實(shí)際企業(yè)應(yīng)用中,處理器密集型應(yīng)用主要考慮使用KVM虛擬機(jī)。內(nèi)核編譯測(cè)試不僅對(duì)處理器敏感,也對(duì)內(nèi)存和硬盤讀寫敏感,KVM在內(nèi)核編譯中的表現(xiàn)也是遠(yuǎn)遠(yuǎn)優(yōu)于Xen的兩種虛擬化方案。并且從UnixBench總體性能測(cè)試的結(jié)果來(lái)看,KVM硬件輔助虛擬化技術(shù)也是所有虛擬化技術(shù)中表現(xiàn)最好的。

    對(duì)于I/O性能測(cè)試,首先從磁盤讀寫的dd測(cè)試來(lái)看:所有虛擬化技術(shù)均低于物理機(jī)性能的50%,表現(xiàn)最好的是Xen半虛擬化和Virtual Box,而表現(xiàn)最差的是硬件輔助的KVM;在并發(fā)讀寫Dbench測(cè)試中,Virtual Box的性能超過(guò)了物理機(jī)的性能,而性能最差的仍然是KVM。因此,可以看出,KVM的磁盤I/O性能在所有虛擬化技術(shù)中最弱的,面向磁盤輸入輸出密集的應(yīng)用不適合使用KVM虛擬化技術(shù)。其次,從網(wǎng)絡(luò)I/O性能來(lái)看,在Netperf測(cè)試中,除了Xen硬件輔助虛擬化,其他虛擬化技術(shù)均具有與物理機(jī)相當(dāng)?shù)男阅?,在Rsync的兩項(xiàng)測(cè)試中,也是Xen的硬件輔助虛擬化性能最差。由此可以看出,對(duì)于網(wǎng)絡(luò)I/O密集的應(yīng)用,使用Xen的硬件輔助虛擬化是不太合適的。

    通過(guò)以上分析,本文的結(jié)論是:對(duì)于處理器密集型的應(yīng)用,適合選擇使用KVM硬件輔助虛擬化技術(shù);對(duì)于磁盤I/O密集的應(yīng)用,不適合使用KVM硬件輔助虛擬化技術(shù);對(duì)于網(wǎng)絡(luò)I/O密集的應(yīng)用,不適合選用本文測(cè)試所使用的Xen的硬件輔助虛擬化版本,而其他虛擬化技術(shù)都可作為備選方案。

    1 Christopher Strachey.Time sharing in large fast computers.In:International Conference on Information Processing,UNESCO,June 1959

    2 懷進(jìn)鵬,李沁,胡春明.基于虛擬機(jī)的虛擬計(jì)算環(huán)境研究與設(shè)計(jì).軟件學(xué)報(bào),2007(4)

    3 Popek G J,Goldberg R P.Formal requirements for virtualizable third generation architectures.Commun ACM,1974,17(7):412~421

    4 Robin J,Irvine C.Analysis of the Intel pentium’s ability to support a secure virtual machine monitor,2000

    5 Fabrice Bellard.Qemu,a fast and portable dynamic translator.In:Proceedings of the Annual Conference on USENIX Annual Technical Conference,Berkeley,CA,USA,2005

    6 Forbes J M.Why virtualization fragmentation sucks.In:Proceedings of the Linux Symposium,Ottawa,ON,Canada,June 2007

    7 Standard Performance Evaluation Corporation.Spec Virtualization Committee,http://www.spec.org/specvirtualization/,April 2008

    8 Makhija,et al.Vmmark:a scalable benchmark for virtualized systems.Tech reaport,VMware,Inc,2006

    9 Casazza,et al.Redefining server performance characterization for virtualization benchmarking.Intel Technology Journal,2006,10(3):243~252

    猜你喜歡
    測(cè)試程序評(píng)測(cè)內(nèi)核
    萬(wàn)物皆可IP的時(shí)代,我們當(dāng)夯實(shí)的IP內(nèi)核是什么?
    強(qiáng)化『高新』內(nèi)核 打造農(nóng)業(yè)『硅谷』
    次時(shí)代主機(jī)微軟XSX全方位評(píng)測(cè)(下)
    次時(shí)代主機(jī)微軟XSX全方位評(píng)測(cè)(上)
    基于嵌入式Linux內(nèi)核的自恢復(fù)設(shè)計(jì)
    Linux內(nèi)核mmap保護(hù)機(jī)制研究
    攻坡新利器,TOKEN VENTOUS評(píng)測(cè)
    基于Castle型機(jī)械手的三溫量產(chǎn)測(cè)試平臺(tái)實(shí)現(xiàn)
    Canyon Ultimate CF SLX 8.0 DI2評(píng)測(cè)
    手機(jī)APP交互界面人因適合性測(cè)試程序的設(shè)計(jì)與實(shí)現(xiàn)
    国产成人免费观看mmmm| 在线免费观看不下载黄p国产| 菩萨蛮人人尽说江南好唐韦庄| 成年女人看的毛片在线观看| 成人综合一区亚洲| 啦啦啦啦在线视频资源| 中文乱码字字幕精品一区二区三区| 男男h啪啪无遮挡| 国产精品国产三级国产av玫瑰| 国产精品偷伦视频观看了| 你懂的网址亚洲精品在线观看| 中文在线观看免费www的网站| 亚洲精品日本国产第一区| 国产黄片视频在线免费观看| 一本色道久久久久久精品综合| 亚洲成人精品中文字幕电影| 亚洲成人av在线免费| 联通29元200g的流量卡| 欧美成人午夜免费资源| 国产精品一区www在线观看| 免费观看无遮挡的男女| 精品一区在线观看国产| 国产精品成人在线| 国产爱豆传媒在线观看| 免费观看在线日韩| 精品少妇黑人巨大在线播放| 精品人妻一区二区三区麻豆| 一级毛片我不卡| 综合色丁香网| 啦啦啦在线观看免费高清www| 边亲边吃奶的免费视频| 少妇高潮的动态图| 特级一级黄色大片| 午夜免费男女啪啪视频观看| 99久久人妻综合| 亚洲精品456在线播放app| 日韩 亚洲 欧美在线| 日本欧美国产在线视频| 成人无遮挡网站| 欧美激情在线99| 精品少妇久久久久久888优播| 亚洲欧美成人综合另类久久久| av网站免费在线观看视频| 亚洲欧美精品专区久久| 国产有黄有色有爽视频| 欧美变态另类bdsm刘玥| 日韩视频在线欧美| 蜜桃久久精品国产亚洲av| 免费黄色在线免费观看| av女优亚洲男人天堂| 久久国内精品自在自线图片| 亚洲精品国产成人久久av| 七月丁香在线播放| 国产精品国产三级国产av玫瑰| 国产伦精品一区二区三区视频9| 精品国产乱码久久久久久小说| 国产精品福利在线免费观看| 免费高清在线观看视频在线观看| 亚洲精品aⅴ在线观看| 在线看a的网站| 色网站视频免费| 国产男女超爽视频在线观看| 国产伦理片在线播放av一区| 赤兔流量卡办理| 国产探花在线观看一区二区| 国产一区有黄有色的免费视频| 亚洲天堂国产精品一区在线| 国产乱人偷精品视频| 日日啪夜夜爽| 老师上课跳d突然被开到最大视频| 日日啪夜夜爽| 精品一区二区三卡| 成人一区二区视频在线观看| 又爽又黄a免费视频| 亚洲精品中文字幕在线视频 | 99久久人妻综合| 午夜精品国产一区二区电影 | 欧美日韩国产mv在线观看视频 | 久久ye,这里只有精品| 高清日韩中文字幕在线| 美女国产视频在线观看| 高清日韩中文字幕在线| 亚洲av.av天堂| 国产男女内射视频| 国产男女内射视频| 欧美性感艳星| 欧美成人a在线观看| 日日摸夜夜添夜夜爱| 欧美日韩国产mv在线观看视频 | 欧美xxxx黑人xx丫x性爽| 91久久精品国产一区二区成人| 久久6这里有精品| 欧美xxxx黑人xx丫x性爽| 日韩亚洲欧美综合| 乱系列少妇在线播放| 丝袜脚勾引网站| av国产久精品久网站免费入址| av卡一久久| 毛片一级片免费看久久久久| 国语对白做爰xxxⅹ性视频网站| 国产在视频线精品| 最近的中文字幕免费完整| 欧美丝袜亚洲另类| 黄色视频在线播放观看不卡| 国产视频内射| 成人亚洲精品av一区二区| 久久精品国产鲁丝片午夜精品| 日韩视频在线欧美| 欧美+日韩+精品| 亚洲成人av在线免费| 寂寞人妻少妇视频99o| 人妻夜夜爽99麻豆av| 80岁老熟妇乱子伦牲交| 97人妻精品一区二区三区麻豆| 精品熟女少妇av免费看| 永久网站在线| 一本色道久久久久久精品综合| 免费高清在线观看视频在线观看| av在线蜜桃| 国产精品偷伦视频观看了| 婷婷色综合大香蕉| 亚洲怡红院男人天堂| 成人国产av品久久久| 免费观看a级毛片全部| 成人国产麻豆网| 一级片'在线观看视频| 青春草亚洲视频在线观看| 91久久精品国产一区二区成人| 色婷婷久久久亚洲欧美| 99热6这里只有精品| 久久精品久久久久久久性| 欧美日韩亚洲高清精品| 国产乱人偷精品视频| 又黄又爽又刺激的免费视频.| 成人欧美大片| 亚洲精品一二三| 亚洲经典国产精华液单| 国产精品一区二区性色av| 久久久久精品久久久久真实原创| 中国三级夫妇交换| a级毛片免费高清观看在线播放| 欧美zozozo另类| 大香蕉97超碰在线| 韩国av在线不卡| 高清毛片免费看| 97超碰精品成人国产| 久久久久久久久久久免费av| 欧美日韩综合久久久久久| 国产探花极品一区二区| 99精国产麻豆久久婷婷| 日韩av在线免费看完整版不卡| 男女下面进入的视频免费午夜| 一级片'在线观看视频| 免费观看无遮挡的男女| 午夜爱爱视频在线播放| 国产精品蜜桃在线观看| videos熟女内射| 亚洲欧美成人精品一区二区| 色综合色国产| 男的添女的下面高潮视频| 亚洲欧洲国产日韩| 国产一区亚洲一区在线观看| 欧美另类一区| 男男h啪啪无遮挡| 午夜激情福利司机影院| 亚洲天堂国产精品一区在线| 国产精品人妻久久久久久| 精品国产一区二区三区久久久樱花 | 九九久久精品国产亚洲av麻豆| 久久久久久九九精品二区国产| 亚洲精品日韩av片在线观看| 国产精品久久久久久精品电影| 中国国产av一级| 春色校园在线视频观看| 成人鲁丝片一二三区免费| 久久久a久久爽久久v久久| 十八禁网站网址无遮挡 | 亚洲高清免费不卡视频| 免费黄色在线免费观看| 久久精品国产鲁丝片午夜精品| 国产成人a区在线观看| 人人妻人人爽人人添夜夜欢视频 | 777米奇影视久久| 亚洲精品色激情综合| 久久6这里有精品| 狂野欧美白嫩少妇大欣赏| 亚洲天堂国产精品一区在线| 亚洲欧美日韩东京热| 日本黄大片高清| 国产精品av视频在线免费观看| 亚洲av电影在线观看一区二区三区 | 久久精品夜色国产| 极品少妇高潮喷水抽搐| 小蜜桃在线观看免费完整版高清| av福利片在线观看| 亚洲自拍偷在线| 亚洲国产精品专区欧美| 噜噜噜噜噜久久久久久91| 18禁裸乳无遮挡免费网站照片| 美女视频免费永久观看网站| 男女无遮挡免费网站观看| 欧美人与善性xxx| 三级男女做爰猛烈吃奶摸视频| 久久久午夜欧美精品| 18禁裸乳无遮挡动漫免费视频 | 波多野结衣巨乳人妻| 国产老妇女一区| 亚洲自拍偷在线| 亚洲精品国产色婷婷电影| 久久午夜福利片| 国产精品久久久久久精品古装| 天堂网av新在线| 伊人久久精品亚洲午夜| 亚洲精品aⅴ在线观看| 国内揄拍国产精品人妻在线| 五月玫瑰六月丁香| 亚洲综合色惰| 亚洲最大成人av| 五月天丁香电影| 亚洲四区av| 蜜桃亚洲精品一区二区三区| 91精品国产九色| 国产亚洲av片在线观看秒播厂| 网址你懂的国产日韩在线| 汤姆久久久久久久影院中文字幕| 国产成人精品婷婷| 丰满少妇做爰视频| 国产精品国产三级国产专区5o| 国产大屁股一区二区在线视频| 白带黄色成豆腐渣| 日韩欧美精品v在线| 成人特级av手机在线观看| 六月丁香七月| 99热全是精品| 国产在线男女| 亚洲国产高清在线一区二区三| 99久久精品热视频| 视频中文字幕在线观看| 少妇猛男粗大的猛烈进出视频 | 欧美变态另类bdsm刘玥| 日本-黄色视频高清免费观看| 黄片wwwwww| 男女国产视频网站| 亚洲精品日本国产第一区| 精品亚洲乱码少妇综合久久| 亚洲欧美日韩东京热| 婷婷色麻豆天堂久久| 五月玫瑰六月丁香| 亚洲欧美日韩卡通动漫| 亚洲成人久久爱视频| 亚洲在线观看片| 老司机影院毛片| 国产极品天堂在线| 国产一区亚洲一区在线观看| 王馨瑶露胸无遮挡在线观看| 特大巨黑吊av在线直播| 麻豆成人av视频| 蜜臀久久99精品久久宅男| 久久久精品欧美日韩精品| 老司机影院成人| 亚洲国产精品国产精品| 国产欧美亚洲国产| 日本与韩国留学比较| 啦啦啦在线观看免费高清www| 亚洲高清免费不卡视频| 狠狠精品人妻久久久久久综合| 日日摸夜夜添夜夜添av毛片| 欧美精品一区二区大全| 亚洲自偷自拍三级| 亚洲四区av| 一级爰片在线观看| 一个人看的www免费观看视频| 国产一区二区在线观看日韩| 又粗又硬又长又爽又黄的视频| 91精品伊人久久大香线蕉| 久久精品久久久久久久性| 亚洲丝袜综合中文字幕| 波野结衣二区三区在线| 在线观看一区二区三区| 亚洲av福利一区| 在线免费十八禁| 熟女电影av网| 亚洲av中文av极速乱| 91久久精品国产一区二区三区| av女优亚洲男人天堂| 国产精品麻豆人妻色哟哟久久| 免费大片黄手机在线观看| 国产真实伦视频高清在线观看| 国产精品女同一区二区软件| 国产69精品久久久久777片| 看黄色毛片网站| 久久久亚洲精品成人影院| 大片电影免费在线观看免费| 国产片特级美女逼逼视频| 精品人妻一区二区三区麻豆| 九草在线视频观看| 亚洲精品成人久久久久久| 日本av手机在线免费观看| 国产精品蜜桃在线观看| 亚洲在久久综合| 少妇人妻一区二区三区视频| 啦啦啦中文免费视频观看日本| 如何舔出高潮| 亚洲无线观看免费| 亚洲成人精品中文字幕电影| 噜噜噜噜噜久久久久久91| 99热全是精品| 熟女av电影| 男女边摸边吃奶| 亚洲国产欧美人成| 最近2019中文字幕mv第一页| 国产在线男女| 久久99蜜桃精品久久| 一区二区三区四区激情视频| 免费黄网站久久成人精品| 亚洲成色77777| 精品久久久久久电影网| av卡一久久| 中文字幕制服av| 人人妻人人澡人人爽人人夜夜| 成人国产麻豆网| 亚洲婷婷狠狠爱综合网| 免费在线观看成人毛片| 一级爰片在线观看| 天天躁夜夜躁狠狠久久av| 亚洲av电影在线观看一区二区三区 | 久久99热6这里只有精品| 久久久久久久久久成人| 国内揄拍国产精品人妻在线| 国产精品久久久久久av不卡| 91精品国产九色| 色综合色国产| 97超视频在线观看视频| 国产片特级美女逼逼视频| 97超碰精品成人国产| 久久久午夜欧美精品| 亚洲精品久久午夜乱码| 晚上一个人看的免费电影| 国产欧美亚洲国产| 国产成人免费观看mmmm| 亚洲成人久久爱视频| av在线亚洲专区| 男女下面进入的视频免费午夜| 婷婷色综合www| 80岁老熟妇乱子伦牲交| 亚洲欧美日韩无卡精品| 国产精品久久久久久av不卡| 久久久久久久亚洲中文字幕| 成人毛片a级毛片在线播放| 精品久久国产蜜桃| 国产精品一二三区在线看| 五月开心婷婷网| 亚洲伊人久久精品综合| 91精品伊人久久大香线蕉| 真实男女啪啪啪动态图| 久久久午夜欧美精品| 久久精品久久精品一区二区三区| 国产综合懂色| 亚洲激情五月婷婷啪啪| 一二三四中文在线观看免费高清| 涩涩av久久男人的天堂| 国产精品一区二区性色av| 国产精品爽爽va在线观看网站| 国产精品久久久久久精品古装| 五月开心婷婷网| 国产午夜精品久久久久久一区二区三区| 日本一二三区视频观看| 99热这里只有是精品50| av天堂中文字幕网| 啦啦啦在线观看免费高清www| 韩国av在线不卡| 三级经典国产精品| 国产精品国产三级国产av玫瑰| 亚洲成人久久爱视频| 久久久久国产网址| 各种免费的搞黄视频| 国产片特级美女逼逼视频| 尾随美女入室| 日本wwww免费看| 五月天丁香电影| 日韩国内少妇激情av| 国产精品一及| 人妻少妇偷人精品九色| 免费看不卡的av| 黄片wwwwww| 午夜福利视频1000在线观看| 亚洲在线观看片| 国产精品无大码| 六月丁香七月| 午夜精品一区二区三区免费看| av在线观看视频网站免费| 久久97久久精品| 大又大粗又爽又黄少妇毛片口| 婷婷色麻豆天堂久久| av国产精品久久久久影院| 成人美女网站在线观看视频| 国产真实伦视频高清在线观看| 最近手机中文字幕大全| 欧美+日韩+精品| 少妇丰满av| 国产成人aa在线观看| www.av在线官网国产| 亚洲国产欧美在线一区| 蜜桃亚洲精品一区二区三区| 高清午夜精品一区二区三区| 亚洲国产欧美在线一区| 免费看av在线观看网站| 天堂中文最新版在线下载 | 在现免费观看毛片| 国产精品国产av在线观看| 欧美日韩精品成人综合77777| 97热精品久久久久久| 18+在线观看网站| 国产一区二区在线观看日韩| 日韩亚洲欧美综合| 麻豆成人av视频| 大码成人一级视频| 啦啦啦啦在线视频资源| 高清午夜精品一区二区三区| 午夜亚洲福利在线播放| 欧美日韩亚洲高清精品| 日韩,欧美,国产一区二区三区| 黑人高潮一二区| 三级国产精品片| 欧美三级亚洲精品| 国产精品女同一区二区软件| 乱码一卡2卡4卡精品| 亚洲av国产av综合av卡| 丝袜美腿在线中文| 成年女人在线观看亚洲视频 | 97精品久久久久久久久久精品| 黄色配什么色好看| 九色成人免费人妻av| 在线亚洲精品国产二区图片欧美 | 蜜臀久久99精品久久宅男| 2021少妇久久久久久久久久久| 少妇的逼水好多| 精品一区二区免费观看| 久久久久国产精品人妻一区二区| 老司机影院毛片| 国产高清国产精品国产三级 | 女的被弄到高潮叫床怎么办| 日韩欧美 国产精品| 能在线免费看毛片的网站| 久久亚洲国产成人精品v| 久久99热这里只有精品18| 亚洲欧美一区二区三区国产| av福利片在线观看| 久久ye,这里只有精品| 国产日韩欧美亚洲二区| 国产黄频视频在线观看| 国产亚洲精品久久久com| 亚洲最大成人中文| 色哟哟·www| 别揉我奶头 嗯啊视频| 日本与韩国留学比较| 色婷婷久久久亚洲欧美| 黄色一级大片看看| 一个人看视频在线观看www免费| tube8黄色片| 亚洲精品久久午夜乱码| 国产久久久一区二区三区| 永久免费av网站大全| 国产成人免费无遮挡视频| 人人妻人人看人人澡| 日韩大片免费观看网站| 91精品国产九色| 亚洲精品亚洲一区二区| 亚洲欧美清纯卡通| 黄色配什么色好看| 搡老乐熟女国产| a级一级毛片免费在线观看| 爱豆传媒免费全集在线观看| 中文字幕制服av| 国产亚洲5aaaaa淫片| 丝袜脚勾引网站| 国产熟女欧美一区二区| 在线观看免费高清a一片| 久久久欧美国产精品| 18禁裸乳无遮挡动漫免费视频 | 久久99精品国语久久久| 精品一区二区三区视频在线| 国产男女超爽视频在线观看| 丝袜美腿在线中文| 亚洲性久久影院| 男女国产视频网站| 美女被艹到高潮喷水动态| 大码成人一级视频| 精品人妻一区二区三区麻豆| 男女下面进入的视频免费午夜| 女人被狂操c到高潮| 亚洲精品亚洲一区二区| 亚洲欧美中文字幕日韩二区| 欧美xxⅹ黑人| 丰满少妇做爰视频| 三级经典国产精品| 色视频在线一区二区三区| 久热这里只有精品99| 免费电影在线观看免费观看| 亚洲不卡免费看| 精品国产乱码久久久久久小说| 韩国高清视频一区二区三区| 国产高潮美女av| 国产亚洲av嫩草精品影院| 大陆偷拍与自拍| 黄色怎么调成土黄色| a级一级毛片免费在线观看| 久久人人爽人人爽人人片va| 极品少妇高潮喷水抽搐| 日韩伦理黄色片| 亚洲精品中文字幕在线视频 | 亚洲av电影在线观看一区二区三区 | 欧美日本视频| 精品午夜福利在线看| 老女人水多毛片| 日本wwww免费看| 亚洲人成网站在线播| 精品人妻视频免费看| 性色av一级| 街头女战士在线观看网站| 啦啦啦啦在线视频资源| 国产黄色免费在线视频| 午夜爱爱视频在线播放| 高清午夜精品一区二区三区| 六月丁香七月| 成年版毛片免费区| 亚洲aⅴ乱码一区二区在线播放| 搞女人的毛片| 深爱激情五月婷婷| 欧美日本视频| 嫩草影院精品99| 熟女av电影| 青春草亚洲视频在线观看| 另类亚洲欧美激情| 欧美国产精品一级二级三级 | 日韩三级伦理在线观看| 免费黄网站久久成人精品| 精品久久久久久久久亚洲| 免费看日本二区| av国产免费在线观看| 热re99久久精品国产66热6| 日韩av在线免费看完整版不卡| 日本爱情动作片www.在线观看| 欧美激情国产日韩精品一区| 久久人人爽av亚洲精品天堂 | 欧美潮喷喷水| 国产精品人妻久久久影院| 新久久久久国产一级毛片| 99热网站在线观看| 免费黄网站久久成人精品| 3wmmmm亚洲av在线观看| 国产精品久久久久久精品古装| 免费观看的影片在线观看| 老司机影院毛片| 国语对白做爰xxxⅹ性视频网站| 免费av不卡在线播放| 少妇猛男粗大的猛烈进出视频 | 日本爱情动作片www.在线观看| 欧美激情国产日韩精品一区| 青春草亚洲视频在线观看| 熟女av电影| 免费大片18禁| 欧美老熟妇乱子伦牲交| 国国产精品蜜臀av免费| 久久久久久久久久久丰满| 国产精品成人在线| 国产在视频线精品| 伊人久久国产一区二区| 欧美日韩综合久久久久久| 日日撸夜夜添| 久久久色成人| 国产伦理片在线播放av一区| 日日撸夜夜添| 欧美日韩亚洲高清精品| 久久精品国产自在天天线| 香蕉精品网在线| 男女下面进入的视频免费午夜| av线在线观看网站| 最近最新中文字幕免费大全7| 国产色爽女视频免费观看| 18禁裸乳无遮挡动漫免费视频 | 成人国产av品久久久| 精品少妇黑人巨大在线播放| 国产综合精华液| www.av在线官网国产| 欧美成人一区二区免费高清观看| 黄色日韩在线| 禁无遮挡网站| 欧美精品人与动牲交sv欧美| 午夜激情福利司机影院| 亚洲自拍偷在线| 国产爽快片一区二区三区| 亚洲av男天堂| 乱码一卡2卡4卡精品| 自拍欧美九色日韩亚洲蝌蚪91 | 美女xxoo啪啪120秒动态图| 麻豆成人av视频| 在线观看美女被高潮喷水网站| 伦理电影大哥的女人| 大片免费播放器 马上看| 天堂中文最新版在线下载 | 国产成人a区在线观看| 精品久久国产蜜桃| 99re6热这里在线精品视频| 天美传媒精品一区二区| 一个人看的www免费观看视频| 日本一二三区视频观看| 国产黄色免费在线视频| 国产一级毛片在线| 亚洲怡红院男人天堂| 欧美一级a爱片免费观看看| 国产国拍精品亚洲av在线观看| 中国美白少妇内射xxxbb| 亚洲欧美日韩卡通动漫| 你懂的网址亚洲精品在线观看|