• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    西南空管局氣象中心數(shù)據(jù)庫(kù)服務(wù)器運(yùn)行性能分析

    2014-12-31 00:31:59張宇
    電腦知識(shí)與技術(shù) 2014年35期
    關(guān)鍵詞:小型機(jī)性能分析

    張宇

    摘要:該文針對(duì)在信息化的今天,越來(lái)越多的行業(yè)專(zhuān)業(yè)應(yīng)用在小型機(jī)上運(yùn)行,為了讓系統(tǒng)管理員隨時(shí)了解小型機(jī)的運(yùn)行情況,并且在保證業(yè)務(wù)正常運(yùn)行的同時(shí)兼顧資源的合理分配,故需要對(duì)小型機(jī)隨時(shí)進(jìn)行運(yùn)行性能分析。該文介紹一種IBM小型機(jī)的性能分析工具NMON,通過(guò)使用這種工具,能夠讓管理員隨時(shí)了解小型機(jī)的運(yùn)行情況和資源使用情況等。

    關(guān)鍵詞:小型機(jī);NMON;性能分析

    中圖分類(lèi)號(hào):TP311 文獻(xiàn)標(biāo)識(shí)碼:A 文章編號(hào):1009-3044(2014)35-8355-04

    1 概述

    隨著信息化的高速發(fā)展,各行各業(yè)有越來(lái)越多的業(yè)務(wù)運(yùn)行在小型機(jī)上。小型機(jī)通常是指采用8-32顆處理器,性能和價(jià)格介于PC服務(wù)器和大型主機(jī)之間的一種高性能64位計(jì)算機(jī),小型機(jī)基本上采用UNIX操作系統(tǒng),UNIX服務(wù)器具有區(qū)別X86服務(wù)器和大型主機(jī)的特有體系結(jié)構(gòu),基本上,各個(gè)小型機(jī)廠商都有自己的UNIX版本和處理器。例如IBM公司開(kāi)發(fā)的UNIX操作系統(tǒng)是AIX(AdvacncedInteractiveeXecutive),它運(yùn)行在IBM獨(dú)有的Power系列芯片的小型機(jī)硬件系統(tǒng)之上,通過(guò)全面集成對(duì)32位和64位應(yīng)用的并行支持,為這些應(yīng)用提供了全面的擴(kuò)展性。小型機(jī)和普通PC服務(wù)器的最大差別在于小型機(jī)的高RAS(Reliability,Availability,Sercviceability,高可靠性、高可用性、高服務(wù)性)特性。

    2 現(xiàn)況分析

    西南空管局氣象中心(以下簡(jiǎn)稱(chēng)為中心)數(shù)據(jù)庫(kù)系統(tǒng)是中國(guó)民用航空氣象數(shù)據(jù)庫(kù)系統(tǒng)在西南地區(qū)的重要結(jié)點(diǎn),它在擔(dān)負(fù)著為成都地區(qū)的民航飛行提供氣象保障的同時(shí)還有向西南地區(qū)建設(shè)有氣象數(shù)據(jù)庫(kù)系統(tǒng)的機(jī)場(chǎng)氣象臺(tái)(站)傳輸民航氣象資料的重要職責(zé)。并且由于民航業(yè)務(wù)的特殊性,民航氣象數(shù)據(jù)庫(kù)系統(tǒng)必須24小時(shí)不間斷運(yùn)行。鑒于以上因素,中心數(shù)據(jù)庫(kù)系統(tǒng)中的多個(gè)核心服務(wù)器均為IBM出產(chǎn)的P系列小型機(jī),目前在使用中的有P720、P650、P520等型號(hào)。由于這些服務(wù)器的配置有所差別,在實(shí)際生產(chǎn)過(guò)程中所承擔(dān)的業(yè)務(wù)量也有所區(qū)別。

    伴隨著中國(guó)民用航空事業(yè)的高速發(fā)展,民航氣象業(yè)務(wù)量的增長(zhǎng)也越來(lái)越快,客觀上對(duì)民航氣象數(shù)據(jù)庫(kù)系統(tǒng)服務(wù)器的可靠性、可用性和服務(wù)性提出了更高的要求。在達(dá)到以上目標(biāo)的同時(shí),為了更好的利用每一臺(tái)服務(wù)器的可用資源,則需要系統(tǒng)管理員隨時(shí)掌握服務(wù)器運(yùn)行時(shí)的性能情況。運(yùn)行性能又由服務(wù)器硬件和業(yè)務(wù)軟件共同決定,由于軟件部分的牽涉方面太多,故這部分的性能分析和優(yōu)化不在本文的討論范圍內(nèi)。服務(wù)器硬件上主要有4個(gè)方面和AIX系統(tǒng)性能相關(guān):分別是CPU系統(tǒng)、內(nèi)存系統(tǒng)、磁盤(pán)I/O系統(tǒng)和網(wǎng)絡(luò)系統(tǒng)。系統(tǒng)管理員需對(duì)服務(wù)器這幾方面的運(yùn)行性能進(jìn)行查看分析,了解服務(wù)器的運(yùn)行狀況,以便達(dá)到資源的有效利用。

    3 分析方法

    3.1 通過(guò)系統(tǒng)命令獲取數(shù)據(jù)進(jìn)行分析

    對(duì)于上文提到的4個(gè)方面,AIX系統(tǒng)提供了多種命令可以查看其工作數(shù)據(jù),由管理員獲取這些數(shù)據(jù)后再對(duì)其進(jìn)行客觀分析。如vmstat,sar和tprof命令可以查看CPU的運(yùn)行性能數(shù)據(jù);vmstat,svmon,topas命令可以查看內(nèi)存的運(yùn)行性能數(shù)據(jù);iostat,ilemon命令可以查看磁盤(pán)I/O的運(yùn)行性能數(shù)據(jù);ping,ftp,netstat,netpmon等命令可以查看網(wǎng)絡(luò)的運(yùn)行性能數(shù)據(jù)。

    例如執(zhí)行命令在root賬戶(hù)下執(zhí)行命令sar 1 15,該命令的含義是每隔1秒查看一次CPU的使用率,連續(xù)查看30次,得到以下結(jié)果:

    上述第一列為取樣時(shí)間,第二列%usr是CPU處在用戶(hù)模式下的時(shí)間百分比;第三列%sys是CPU處在系統(tǒng)模式下的時(shí)間百分比;第四列%wio是CPU等待輸入輸出完成時(shí)間的百分比;第五列%idle是CPU空閑時(shí)間百分比;第六列physc是消耗物理處理器的數(shù)目。

    在上述結(jié)果中,系統(tǒng)管理員應(yīng)主要注意%wio和%idle。%wio的值過(guò)高,表示硬盤(pán)存在I/O瓶頸;%idle值高,表示CPU較空閑,如果%idle值高但系統(tǒng)響應(yīng)慢時(shí),有可能是CPU等待分配內(nèi)存,此時(shí)應(yīng)加大內(nèi)存容量。%idle值如果持續(xù)低于10,那么系統(tǒng)的CPU處理能力相對(duì)較低,表明系統(tǒng)中最需要解決的資源是CPU。

    由于AIX系統(tǒng)命令參數(shù)較多,上述例子只是一個(gè)簡(jiǎn)單示例,sar命令還有其他較多參數(shù)可以使用,用于各項(xiàng)系統(tǒng)參數(shù)的收集、報(bào)告或者保存。如果是查看短時(shí)間內(nèi)AIX系統(tǒng)的某一方面的運(yùn)行狀態(tài),用上述命令進(jìn)行查看比較方便;若需要查看AIX系統(tǒng)在一個(gè)較長(zhǎng)時(shí)間內(nèi)的的全面運(yùn)行狀態(tài),則需要同時(shí)運(yùn)行多個(gè)命令,將采集到的各種數(shù)據(jù)進(jìn)行集中分析,從而獲取到系統(tǒng)管理員需要了解到的各種信息。

    3.2 使用NMON工具進(jìn)行分析

    在對(duì)AIX系統(tǒng)進(jìn)行整體檢查時(shí),需要運(yùn)行多個(gè)命令,采集多方面的數(shù)據(jù),并且需要將各項(xiàng)數(shù)據(jù)進(jìn)行交叉分析。對(duì)于系統(tǒng)管理員而言,進(jìn)行這樣的檢查相對(duì)繁瑣且占用大量時(shí)間,針對(duì)這種情況,在對(duì)系統(tǒng)進(jìn)行全面分析時(shí),可以采用NMON工具進(jìn)行數(shù)據(jù)的采集分析。NMON是一種在AIX與各種Linux操作系統(tǒng)上使用的監(jiān)控與分析工具,對(duì)于系統(tǒng)原本的一些監(jiān)控工具而言,NMON所記錄的信息相對(duì)全面,它能在系統(tǒng)運(yùn)行過(guò)程中實(shí)時(shí)地捕捉系統(tǒng)資源的使用情況,并且能輸出結(jié)果到文件中,然后通過(guò)nmon_analyzer工具產(chǎn)生數(shù)據(jù)文件和圖形化結(jié)果。

    NMON所記錄的數(shù)據(jù)包括以下方面:CPU占用率;內(nèi)存使用情況;內(nèi)核統(tǒng)計(jì)信息和運(yùn)行隊(duì)列信息;磁盤(pán)I/O速度、傳輸和讀/寫(xiě)比率;文件系統(tǒng)中的可用空間;磁盤(pán)適配器;網(wǎng)絡(luò)I/O速度、傳輸和讀/寫(xiě)比率;頁(yè)面空間和頁(yè)面速度;CPU和AIX規(guī)范;消耗資源最多的進(jìn)程;IBM HTTP Web緩存;用戶(hù)自定義的磁盤(pán)組;計(jì)算機(jī)詳細(xì)信息和資源;異步I/O;工作負(fù)載管理器(WLM);IBM ESS磁盤(pán);網(wǎng)絡(luò)文件系統(tǒng)(NFS);動(dòng)態(tài)LPAR(DLPAR)更改等等。endprint

    一個(gè)簡(jiǎn)單的NMON命令示范如下:

    nmon—f —s 30 —c 120

    -f表示輸出文件的格式,上述命令表示采用默認(rèn)值;-s表示每隔30秒采集一次數(shù)據(jù);-c表示一共采集120次數(shù)據(jù)。

    該命令執(zhí)行后就在當(dāng)前目錄下生成如下文件:主機(jī)名_起始時(shí)間_結(jié)束時(shí)間.nmon。再通過(guò)NMON提供的EXCEL文件對(duì)其進(jìn)行加工,即可將結(jié)果生成直觀的EXCEL文件:主機(jī)名_起始時(shí)間_結(jié)束時(shí)間.xlsx。用EXCEL打開(kāi)該文件后第一個(gè)SHEET如圖1所示,這是對(duì)系統(tǒng)整體的一個(gè)運(yùn)行情況概要,它顯示的是目標(biāo)服務(wù)器的CPU 使用情況和I/O的吞吐量在整個(gè)采集時(shí)間內(nèi)的變化情況。

    針對(duì)每頁(yè)的不同內(nèi)容,NMON有多項(xiàng)指標(biāo)對(duì)其進(jìn)行分析,現(xiàn)將一些關(guān)鍵指標(biāo)類(lèi)型如表2所示。上述類(lèi)型則完全覆蓋了服務(wù)器在運(yùn)行過(guò)程中各方面的要素,并且這些要素都已用最直觀的的方式給用戶(hù)顯示出來(lái),如圖2所示。這張SHEET顯示的是DISKXFER,也就是每個(gè)hdisk的I/O每秒操作。在圖2上面一幅圖表,顯示的是HDISK0和HDISK1的每秒I/O操作的數(shù)據(jù),其中藍(lán)色表示平均值,紅色表示加權(quán)平均值,綠色表示最大值。在此引入加權(quán)平均值是因?yàn)樵谑占瘶颖緮?shù)據(jù)過(guò)程中,可能會(huì)面臨系統(tǒng)中的某項(xiàng)資源在一個(gè)長(zhǎng)時(shí)間內(nèi)都是空閑的情況,這樣并不會(huì)影響到數(shù)據(jù)的最大值,但是能夠影響到平均值的準(zhǔn)確性。加權(quán)平均的意義在于提供一項(xiàng)量化因素,說(shuō)明任一份樣本數(shù)據(jù),它是如何影響到平均值的。圖2下面一副圖表,則顯示的是HDISK0和HDISK1的每份樣本數(shù)據(jù)中的I/O每秒操作量根據(jù)時(shí)間的變化??梢?jiàn)在18:26和21:26兩個(gè)時(shí)間段,磁盤(pán)的I/O操作達(dá)到一天的最大值,并且遠(yuǎn)遠(yuǎn)超過(guò)其他時(shí)候的數(shù)值。在兩幅圖上方還有每個(gè)樣本中的磁盤(pán)I/O的具體數(shù)據(jù),截圖未能將該圖表覆蓋完全。

    對(duì)得出的所有結(jié)論分析后則可對(duì)當(dāng)前服務(wù)器的性能進(jìn)行一定的總體評(píng)估,如果某幾項(xiàng)資源尚未得到充分利用,則可以根據(jù)需要適當(dāng)增加該服務(wù)器上的業(yè)務(wù)量;如果某些方面性能已經(jīng)達(dá)到飽和,則可以適當(dāng)減少該服務(wù)器上的業(yè)務(wù)量,避免長(zhǎng)期對(duì)某項(xiàng)資源的使用率過(guò)高,從而造成影響整個(gè)服務(wù)器的業(yè)務(wù)運(yùn)行。

    4 中心數(shù)據(jù)庫(kù)服務(wù)器實(shí)際分析

    中心數(shù)據(jù)庫(kù)系統(tǒng)核心服務(wù)器為一臺(tái)IBM P720小型機(jī),基本情況如下:操作系統(tǒng)AIX版本為5.3.12.7;4顆POWER7系列CPU;4塊SAS硬盤(pán),每塊硬盤(pán)300G,其中DISK0和DISK1組成ROOTVG,DISK2和DISK3組成DATAVG,并通過(guò)光纖外接存儲(chǔ)設(shè)備,其中DISK4是位于存儲(chǔ)設(shè)備上;系統(tǒng)物理內(nèi)存16G;一塊千兆以太網(wǎng)卡和一塊光纖網(wǎng)卡。在該服務(wù)器上運(yùn)行有民航氣象通信系統(tǒng)和民航氣象數(shù)據(jù)庫(kù)系統(tǒng),民航氣象通信系統(tǒng)的主要功能是轉(zhuǎn)發(fā)民航氣象資料,實(shí)時(shí)接收從上一級(jí)下發(fā)或者下一級(jí)上傳的氣象資料,進(jìn)行相關(guān)處理后再傳輸給下一級(jí)或者上一級(jí),并同時(shí)轉(zhuǎn)發(fā)給本地的一些數(shù)據(jù)庫(kù);民航氣象數(shù)據(jù)庫(kù)系統(tǒng)的主要功能就是對(duì)民航氣象資料進(jìn)行存儲(chǔ),并將這些數(shù)據(jù)提供給用戶(hù)。

    為了對(duì)核心服務(wù)器進(jìn)行運(yùn)行性能分析,我們用NMON對(duì)其進(jìn)行數(shù)據(jù)采集,整個(gè)采集過(guò)程持續(xù)一整天24小時(shí),且每隔20分鐘采集一次樣本。原因在于每天民航氣象數(shù)據(jù)資料的數(shù)量都趨于一致,故核心服務(wù)器每天的業(yè)務(wù)量也基本一致。

    經(jīng)過(guò)一天的數(shù)據(jù)采集后,我們得到最后的概要結(jié)果如圖3所示。由此圖可知,在一整天的業(yè)務(wù)運(yùn)行中,CPU的使用率基本保持在10%以下,磁盤(pán)I/O的吞吐量大部分時(shí)間在每秒200KB左右小幅變化,只有在18點(diǎn)到19點(diǎn)之間,磁盤(pán)I/O達(dá)到最大值700KB/S左右。由于核心服務(wù)器每天在18點(diǎn)后開(kāi)始執(zhí)行前一天的資料歸檔工作,故這個(gè)時(shí)候磁盤(pán)I/O會(huì)達(dá)到當(dāng)天的最大值,其他時(shí)候每天的業(yè)務(wù)分布相對(duì)平均,磁盤(pán)I/O的變化幅度不大。

    圖4為CPU運(yùn)行情況概要,其中藍(lán)色折線為在用戶(hù)模式下執(zhí)行的程序所使用的 CPU 百分比;紅色折線為在內(nèi)核模式下執(zhí)行的程序所使用的 CPU 百分比;綠色折線為等待 IO 所花的時(shí)間百分比。由該圖可知民航氣象業(yè)務(wù)對(duì)系統(tǒng)CPU資源的消耗不高。

    圖5為磁盤(pán)運(yùn)行情況概要,其中藍(lán)色折線為磁盤(pán)設(shè)備的讀取速率,該值很低是因?yàn)榉?wù)器位于網(wǎng)絡(luò)核心區(qū),實(shí)際上未提供對(duì)外的數(shù)據(jù)服務(wù);紅色折線為磁盤(pán)設(shè)備的寫(xiě)入速率,持續(xù)在2000KB/S左右最大達(dá)到國(guó)16000KM/S左右;白色折線為每秒鐘輸出到物理磁盤(pán)的傳輸次數(shù),持續(xù)在150 IO/S左右,最大達(dá)到過(guò)800 IO/S。由該圖可知民航氣象業(yè)務(wù)的數(shù)據(jù)寫(xiě)入基本在24小時(shí)內(nèi)平均分布,對(duì)磁盤(pán)的持續(xù)穩(wěn)定運(yùn)行要求較高。

    圖6為文件系統(tǒng)使用情況概要,顯示文件系統(tǒng)以及mount磁盤(pán)設(shè)備已使用空間百分比。其中藍(lán)色為平均值;紅色為加權(quán)平均值;綠色為最大值。由該圖可知/HOME和/U0的使用空間百分比較高,這與/HOME為運(yùn)行業(yè)務(wù)安裝目錄,/U0為數(shù)據(jù)庫(kù)安裝目錄相符。

    圖7為內(nèi)存使用情況概要,其中藍(lán)色折線為系統(tǒng)程序使用的內(nèi)存百分比,使用率在20%左右;紅色折線為分配給用戶(hù)進(jìn)程的內(nèi)存百分比,使用率在30%左右;米色折線為分配給文件系統(tǒng)緩存的內(nèi)存百分比,使用率在20%左右。由該圖可知民航氣象業(yè)務(wù)對(duì)內(nèi)存資源的消耗不高。

    圖8為網(wǎng)絡(luò)接口使用情況概要,其中上圖藍(lán)色折線為總的接口讀取速率,由于上文提到的原因該值較低,持續(xù)在100KB/S左右;紅色折線為接口寫(xiě)入速率,持續(xù)在200KB/S至300KB/S之間,瞬時(shí)最大值達(dá)到2500KB/S。下圖分別表示每一個(gè)接口的速率,其中藍(lán)色為平均值,紅色為加權(quán)平均值,綠色為最大值??梢?jiàn)EN0的寫(xiě)入操作在各個(gè)接口的使用中占有主要地位。

    最后,由以上各圖可知,中心數(shù)據(jù)庫(kù)核心服務(wù)器的資源足夠滿足各項(xiàng)業(yè)務(wù)運(yùn)行的需求,能夠充分保障各項(xiàng)業(yè)務(wù)的正常運(yùn)行。

    5 未來(lái)工作展望

    借助NMON這項(xiàng)工具,我們已經(jīng)能夠及時(shí)對(duì)任何一臺(tái)IBM的小型機(jī)服務(wù)器進(jìn)行性能分析并且得到一份全面的分析結(jié)果。對(duì)于業(yè)務(wù)繁忙,資源經(jīng)常消耗完的服務(wù)器,下一步工作計(jì)劃通過(guò)分析結(jié)果,優(yōu)化該服務(wù)器的運(yùn)行結(jié)構(gòu),使其充分利用各項(xiàng)資源。endprint

    一個(gè)簡(jiǎn)單的NMON命令示范如下:

    nmon—f —s 30 —c 120

    -f表示輸出文件的格式,上述命令表示采用默認(rèn)值;-s表示每隔30秒采集一次數(shù)據(jù);-c表示一共采集120次數(shù)據(jù)。

    該命令執(zhí)行后就在當(dāng)前目錄下生成如下文件:主機(jī)名_起始時(shí)間_結(jié)束時(shí)間.nmon。再通過(guò)NMON提供的EXCEL文件對(duì)其進(jìn)行加工,即可將結(jié)果生成直觀的EXCEL文件:主機(jī)名_起始時(shí)間_結(jié)束時(shí)間.xlsx。用EXCEL打開(kāi)該文件后第一個(gè)SHEET如圖1所示,這是對(duì)系統(tǒng)整體的一個(gè)運(yùn)行情況概要,它顯示的是目標(biāo)服務(wù)器的CPU 使用情況和I/O的吞吐量在整個(gè)采集時(shí)間內(nèi)的變化情況。

    針對(duì)每頁(yè)的不同內(nèi)容,NMON有多項(xiàng)指標(biāo)對(duì)其進(jìn)行分析,現(xiàn)將一些關(guān)鍵指標(biāo)類(lèi)型如表2所示。上述類(lèi)型則完全覆蓋了服務(wù)器在運(yùn)行過(guò)程中各方面的要素,并且這些要素都已用最直觀的的方式給用戶(hù)顯示出來(lái),如圖2所示。這張SHEET顯示的是DISKXFER,也就是每個(gè)hdisk的I/O每秒操作。在圖2上面一幅圖表,顯示的是HDISK0和HDISK1的每秒I/O操作的數(shù)據(jù),其中藍(lán)色表示平均值,紅色表示加權(quán)平均值,綠色表示最大值。在此引入加權(quán)平均值是因?yàn)樵谑占瘶颖緮?shù)據(jù)過(guò)程中,可能會(huì)面臨系統(tǒng)中的某項(xiàng)資源在一個(gè)長(zhǎng)時(shí)間內(nèi)都是空閑的情況,這樣并不會(huì)影響到數(shù)據(jù)的最大值,但是能夠影響到平均值的準(zhǔn)確性。加權(quán)平均的意義在于提供一項(xiàng)量化因素,說(shuō)明任一份樣本數(shù)據(jù),它是如何影響到平均值的。圖2下面一副圖表,則顯示的是HDISK0和HDISK1的每份樣本數(shù)據(jù)中的I/O每秒操作量根據(jù)時(shí)間的變化??梢?jiàn)在18:26和21:26兩個(gè)時(shí)間段,磁盤(pán)的I/O操作達(dá)到一天的最大值,并且遠(yuǎn)遠(yuǎn)超過(guò)其他時(shí)候的數(shù)值。在兩幅圖上方還有每個(gè)樣本中的磁盤(pán)I/O的具體數(shù)據(jù),截圖未能將該圖表覆蓋完全。

    對(duì)得出的所有結(jié)論分析后則可對(duì)當(dāng)前服務(wù)器的性能進(jìn)行一定的總體評(píng)估,如果某幾項(xiàng)資源尚未得到充分利用,則可以根據(jù)需要適當(dāng)增加該服務(wù)器上的業(yè)務(wù)量;如果某些方面性能已經(jīng)達(dá)到飽和,則可以適當(dāng)減少該服務(wù)器上的業(yè)務(wù)量,避免長(zhǎng)期對(duì)某項(xiàng)資源的使用率過(guò)高,從而造成影響整個(gè)服務(wù)器的業(yè)務(wù)運(yùn)行。

    4 中心數(shù)據(jù)庫(kù)服務(wù)器實(shí)際分析

    中心數(shù)據(jù)庫(kù)系統(tǒng)核心服務(wù)器為一臺(tái)IBM P720小型機(jī),基本情況如下:操作系統(tǒng)AIX版本為5.3.12.7;4顆POWER7系列CPU;4塊SAS硬盤(pán),每塊硬盤(pán)300G,其中DISK0和DISK1組成ROOTVG,DISK2和DISK3組成DATAVG,并通過(guò)光纖外接存儲(chǔ)設(shè)備,其中DISK4是位于存儲(chǔ)設(shè)備上;系統(tǒng)物理內(nèi)存16G;一塊千兆以太網(wǎng)卡和一塊光纖網(wǎng)卡。在該服務(wù)器上運(yùn)行有民航氣象通信系統(tǒng)和民航氣象數(shù)據(jù)庫(kù)系統(tǒng),民航氣象通信系統(tǒng)的主要功能是轉(zhuǎn)發(fā)民航氣象資料,實(shí)時(shí)接收從上一級(jí)下發(fā)或者下一級(jí)上傳的氣象資料,進(jìn)行相關(guān)處理后再傳輸給下一級(jí)或者上一級(jí),并同時(shí)轉(zhuǎn)發(fā)給本地的一些數(shù)據(jù)庫(kù);民航氣象數(shù)據(jù)庫(kù)系統(tǒng)的主要功能就是對(duì)民航氣象資料進(jìn)行存儲(chǔ),并將這些數(shù)據(jù)提供給用戶(hù)。

    為了對(duì)核心服務(wù)器進(jìn)行運(yùn)行性能分析,我們用NMON對(duì)其進(jìn)行數(shù)據(jù)采集,整個(gè)采集過(guò)程持續(xù)一整天24小時(shí),且每隔20分鐘采集一次樣本。原因在于每天民航氣象數(shù)據(jù)資料的數(shù)量都趨于一致,故核心服務(wù)器每天的業(yè)務(wù)量也基本一致。

    經(jīng)過(guò)一天的數(shù)據(jù)采集后,我們得到最后的概要結(jié)果如圖3所示。由此圖可知,在一整天的業(yè)務(wù)運(yùn)行中,CPU的使用率基本保持在10%以下,磁盤(pán)I/O的吞吐量大部分時(shí)間在每秒200KB左右小幅變化,只有在18點(diǎn)到19點(diǎn)之間,磁盤(pán)I/O達(dá)到最大值700KB/S左右。由于核心服務(wù)器每天在18點(diǎn)后開(kāi)始執(zhí)行前一天的資料歸檔工作,故這個(gè)時(shí)候磁盤(pán)I/O會(huì)達(dá)到當(dāng)天的最大值,其他時(shí)候每天的業(yè)務(wù)分布相對(duì)平均,磁盤(pán)I/O的變化幅度不大。

    圖4為CPU運(yùn)行情況概要,其中藍(lán)色折線為在用戶(hù)模式下執(zhí)行的程序所使用的 CPU 百分比;紅色折線為在內(nèi)核模式下執(zhí)行的程序所使用的 CPU 百分比;綠色折線為等待 IO 所花的時(shí)間百分比。由該圖可知民航氣象業(yè)務(wù)對(duì)系統(tǒng)CPU資源的消耗不高。

    圖5為磁盤(pán)運(yùn)行情況概要,其中藍(lán)色折線為磁盤(pán)設(shè)備的讀取速率,該值很低是因?yàn)榉?wù)器位于網(wǎng)絡(luò)核心區(qū),實(shí)際上未提供對(duì)外的數(shù)據(jù)服務(wù);紅色折線為磁盤(pán)設(shè)備的寫(xiě)入速率,持續(xù)在2000KB/S左右最大達(dá)到國(guó)16000KM/S左右;白色折線為每秒鐘輸出到物理磁盤(pán)的傳輸次數(shù),持續(xù)在150 IO/S左右,最大達(dá)到過(guò)800 IO/S。由該圖可知民航氣象業(yè)務(wù)的數(shù)據(jù)寫(xiě)入基本在24小時(shí)內(nèi)平均分布,對(duì)磁盤(pán)的持續(xù)穩(wěn)定運(yùn)行要求較高。

    圖6為文件系統(tǒng)使用情況概要,顯示文件系統(tǒng)以及mount磁盤(pán)設(shè)備已使用空間百分比。其中藍(lán)色為平均值;紅色為加權(quán)平均值;綠色為最大值。由該圖可知/HOME和/U0的使用空間百分比較高,這與/HOME為運(yùn)行業(yè)務(wù)安裝目錄,/U0為數(shù)據(jù)庫(kù)安裝目錄相符。

    圖7為內(nèi)存使用情況概要,其中藍(lán)色折線為系統(tǒng)程序使用的內(nèi)存百分比,使用率在20%左右;紅色折線為分配給用戶(hù)進(jìn)程的內(nèi)存百分比,使用率在30%左右;米色折線為分配給文件系統(tǒng)緩存的內(nèi)存百分比,使用率在20%左右。由該圖可知民航氣象業(yè)務(wù)對(duì)內(nèi)存資源的消耗不高。

    圖8為網(wǎng)絡(luò)接口使用情況概要,其中上圖藍(lán)色折線為總的接口讀取速率,由于上文提到的原因該值較低,持續(xù)在100KB/S左右;紅色折線為接口寫(xiě)入速率,持續(xù)在200KB/S至300KB/S之間,瞬時(shí)最大值達(dá)到2500KB/S。下圖分別表示每一個(gè)接口的速率,其中藍(lán)色為平均值,紅色為加權(quán)平均值,綠色為最大值??梢?jiàn)EN0的寫(xiě)入操作在各個(gè)接口的使用中占有主要地位。

    最后,由以上各圖可知,中心數(shù)據(jù)庫(kù)核心服務(wù)器的資源足夠滿足各項(xiàng)業(yè)務(wù)運(yùn)行的需求,能夠充分保障各項(xiàng)業(yè)務(wù)的正常運(yùn)行。

    5 未來(lái)工作展望

    借助NMON這項(xiàng)工具,我們已經(jīng)能夠及時(shí)對(duì)任何一臺(tái)IBM的小型機(jī)服務(wù)器進(jìn)行性能分析并且得到一份全面的分析結(jié)果。對(duì)于業(yè)務(wù)繁忙,資源經(jīng)常消耗完的服務(wù)器,下一步工作計(jì)劃通過(guò)分析結(jié)果,優(yōu)化該服務(wù)器的運(yùn)行結(jié)構(gòu),使其充分利用各項(xiàng)資源。endprint

    一個(gè)簡(jiǎn)單的NMON命令示范如下:

    nmon—f —s 30 —c 120

    -f表示輸出文件的格式,上述命令表示采用默認(rèn)值;-s表示每隔30秒采集一次數(shù)據(jù);-c表示一共采集120次數(shù)據(jù)。

    該命令執(zhí)行后就在當(dāng)前目錄下生成如下文件:主機(jī)名_起始時(shí)間_結(jié)束時(shí)間.nmon。再通過(guò)NMON提供的EXCEL文件對(duì)其進(jìn)行加工,即可將結(jié)果生成直觀的EXCEL文件:主機(jī)名_起始時(shí)間_結(jié)束時(shí)間.xlsx。用EXCEL打開(kāi)該文件后第一個(gè)SHEET如圖1所示,這是對(duì)系統(tǒng)整體的一個(gè)運(yùn)行情況概要,它顯示的是目標(biāo)服務(wù)器的CPU 使用情況和I/O的吞吐量在整個(gè)采集時(shí)間內(nèi)的變化情況。

    針對(duì)每頁(yè)的不同內(nèi)容,NMON有多項(xiàng)指標(biāo)對(duì)其進(jìn)行分析,現(xiàn)將一些關(guān)鍵指標(biāo)類(lèi)型如表2所示。上述類(lèi)型則完全覆蓋了服務(wù)器在運(yùn)行過(guò)程中各方面的要素,并且這些要素都已用最直觀的的方式給用戶(hù)顯示出來(lái),如圖2所示。這張SHEET顯示的是DISKXFER,也就是每個(gè)hdisk的I/O每秒操作。在圖2上面一幅圖表,顯示的是HDISK0和HDISK1的每秒I/O操作的數(shù)據(jù),其中藍(lán)色表示平均值,紅色表示加權(quán)平均值,綠色表示最大值。在此引入加權(quán)平均值是因?yàn)樵谑占瘶颖緮?shù)據(jù)過(guò)程中,可能會(huì)面臨系統(tǒng)中的某項(xiàng)資源在一個(gè)長(zhǎng)時(shí)間內(nèi)都是空閑的情況,這樣并不會(huì)影響到數(shù)據(jù)的最大值,但是能夠影響到平均值的準(zhǔn)確性。加權(quán)平均的意義在于提供一項(xiàng)量化因素,說(shuō)明任一份樣本數(shù)據(jù),它是如何影響到平均值的。圖2下面一副圖表,則顯示的是HDISK0和HDISK1的每份樣本數(shù)據(jù)中的I/O每秒操作量根據(jù)時(shí)間的變化??梢?jiàn)在18:26和21:26兩個(gè)時(shí)間段,磁盤(pán)的I/O操作達(dá)到一天的最大值,并且遠(yuǎn)遠(yuǎn)超過(guò)其他時(shí)候的數(shù)值。在兩幅圖上方還有每個(gè)樣本中的磁盤(pán)I/O的具體數(shù)據(jù),截圖未能將該圖表覆蓋完全。

    對(duì)得出的所有結(jié)論分析后則可對(duì)當(dāng)前服務(wù)器的性能進(jìn)行一定的總體評(píng)估,如果某幾項(xiàng)資源尚未得到充分利用,則可以根據(jù)需要適當(dāng)增加該服務(wù)器上的業(yè)務(wù)量;如果某些方面性能已經(jīng)達(dá)到飽和,則可以適當(dāng)減少該服務(wù)器上的業(yè)務(wù)量,避免長(zhǎng)期對(duì)某項(xiàng)資源的使用率過(guò)高,從而造成影響整個(gè)服務(wù)器的業(yè)務(wù)運(yùn)行。

    4 中心數(shù)據(jù)庫(kù)服務(wù)器實(shí)際分析

    中心數(shù)據(jù)庫(kù)系統(tǒng)核心服務(wù)器為一臺(tái)IBM P720小型機(jī),基本情況如下:操作系統(tǒng)AIX版本為5.3.12.7;4顆POWER7系列CPU;4塊SAS硬盤(pán),每塊硬盤(pán)300G,其中DISK0和DISK1組成ROOTVG,DISK2和DISK3組成DATAVG,并通過(guò)光纖外接存儲(chǔ)設(shè)備,其中DISK4是位于存儲(chǔ)設(shè)備上;系統(tǒng)物理內(nèi)存16G;一塊千兆以太網(wǎng)卡和一塊光纖網(wǎng)卡。在該服務(wù)器上運(yùn)行有民航氣象通信系統(tǒng)和民航氣象數(shù)據(jù)庫(kù)系統(tǒng),民航氣象通信系統(tǒng)的主要功能是轉(zhuǎn)發(fā)民航氣象資料,實(shí)時(shí)接收從上一級(jí)下發(fā)或者下一級(jí)上傳的氣象資料,進(jìn)行相關(guān)處理后再傳輸給下一級(jí)或者上一級(jí),并同時(shí)轉(zhuǎn)發(fā)給本地的一些數(shù)據(jù)庫(kù);民航氣象數(shù)據(jù)庫(kù)系統(tǒng)的主要功能就是對(duì)民航氣象資料進(jìn)行存儲(chǔ),并將這些數(shù)據(jù)提供給用戶(hù)。

    為了對(duì)核心服務(wù)器進(jìn)行運(yùn)行性能分析,我們用NMON對(duì)其進(jìn)行數(shù)據(jù)采集,整個(gè)采集過(guò)程持續(xù)一整天24小時(shí),且每隔20分鐘采集一次樣本。原因在于每天民航氣象數(shù)據(jù)資料的數(shù)量都趨于一致,故核心服務(wù)器每天的業(yè)務(wù)量也基本一致。

    經(jīng)過(guò)一天的數(shù)據(jù)采集后,我們得到最后的概要結(jié)果如圖3所示。由此圖可知,在一整天的業(yè)務(wù)運(yùn)行中,CPU的使用率基本保持在10%以下,磁盤(pán)I/O的吞吐量大部分時(shí)間在每秒200KB左右小幅變化,只有在18點(diǎn)到19點(diǎn)之間,磁盤(pán)I/O達(dá)到最大值700KB/S左右。由于核心服務(wù)器每天在18點(diǎn)后開(kāi)始執(zhí)行前一天的資料歸檔工作,故這個(gè)時(shí)候磁盤(pán)I/O會(huì)達(dá)到當(dāng)天的最大值,其他時(shí)候每天的業(yè)務(wù)分布相對(duì)平均,磁盤(pán)I/O的變化幅度不大。

    圖4為CPU運(yùn)行情況概要,其中藍(lán)色折線為在用戶(hù)模式下執(zhí)行的程序所使用的 CPU 百分比;紅色折線為在內(nèi)核模式下執(zhí)行的程序所使用的 CPU 百分比;綠色折線為等待 IO 所花的時(shí)間百分比。由該圖可知民航氣象業(yè)務(wù)對(duì)系統(tǒng)CPU資源的消耗不高。

    圖5為磁盤(pán)運(yùn)行情況概要,其中藍(lán)色折線為磁盤(pán)設(shè)備的讀取速率,該值很低是因?yàn)榉?wù)器位于網(wǎng)絡(luò)核心區(qū),實(shí)際上未提供對(duì)外的數(shù)據(jù)服務(wù);紅色折線為磁盤(pán)設(shè)備的寫(xiě)入速率,持續(xù)在2000KB/S左右最大達(dá)到國(guó)16000KM/S左右;白色折線為每秒鐘輸出到物理磁盤(pán)的傳輸次數(shù),持續(xù)在150 IO/S左右,最大達(dá)到過(guò)800 IO/S。由該圖可知民航氣象業(yè)務(wù)的數(shù)據(jù)寫(xiě)入基本在24小時(shí)內(nèi)平均分布,對(duì)磁盤(pán)的持續(xù)穩(wěn)定運(yùn)行要求較高。

    圖6為文件系統(tǒng)使用情況概要,顯示文件系統(tǒng)以及mount磁盤(pán)設(shè)備已使用空間百分比。其中藍(lán)色為平均值;紅色為加權(quán)平均值;綠色為最大值。由該圖可知/HOME和/U0的使用空間百分比較高,這與/HOME為運(yùn)行業(yè)務(wù)安裝目錄,/U0為數(shù)據(jù)庫(kù)安裝目錄相符。

    圖7為內(nèi)存使用情況概要,其中藍(lán)色折線為系統(tǒng)程序使用的內(nèi)存百分比,使用率在20%左右;紅色折線為分配給用戶(hù)進(jìn)程的內(nèi)存百分比,使用率在30%左右;米色折線為分配給文件系統(tǒng)緩存的內(nèi)存百分比,使用率在20%左右。由該圖可知民航氣象業(yè)務(wù)對(duì)內(nèi)存資源的消耗不高。

    圖8為網(wǎng)絡(luò)接口使用情況概要,其中上圖藍(lán)色折線為總的接口讀取速率,由于上文提到的原因該值較低,持續(xù)在100KB/S左右;紅色折線為接口寫(xiě)入速率,持續(xù)在200KB/S至300KB/S之間,瞬時(shí)最大值達(dá)到2500KB/S。下圖分別表示每一個(gè)接口的速率,其中藍(lán)色為平均值,紅色為加權(quán)平均值,綠色為最大值。可見(jiàn)EN0的寫(xiě)入操作在各個(gè)接口的使用中占有主要地位。

    最后,由以上各圖可知,中心數(shù)據(jù)庫(kù)核心服務(wù)器的資源足夠滿足各項(xiàng)業(yè)務(wù)運(yùn)行的需求,能夠充分保障各項(xiàng)業(yè)務(wù)的正常運(yùn)行。

    5 未來(lái)工作展望

    借助NMON這項(xiàng)工具,我們已經(jīng)能夠及時(shí)對(duì)任何一臺(tái)IBM的小型機(jī)服務(wù)器進(jìn)行性能分析并且得到一份全面的分析結(jié)果。對(duì)于業(yè)務(wù)繁忙,資源經(jīng)常消耗完的服務(wù)器,下一步工作計(jì)劃通過(guò)分析結(jié)果,優(yōu)化該服務(wù)器的運(yùn)行結(jié)構(gòu),使其充分利用各項(xiàng)資源。endprint

    猜你喜歡
    小型機(jī)性能分析
    廣電網(wǎng)絡(luò)省級(jí)IT系統(tǒng)平臺(tái)設(shè)計(jì)與實(shí)現(xiàn)
    商業(yè)銀行開(kāi)發(fā)中心云計(jì)算平臺(tái)基礎(chǔ)架構(gòu)設(shè)計(jì)
    自動(dòng)控制系統(tǒng)的優(yōu)劣評(píng)價(jià)分析
    考試周刊(2017年7期)2017-02-06 21:41:37
    數(shù)據(jù)中心去小型機(jī)化可行性研究
    Oracle集群常見(jiàn)故障三例
    網(wǎng)絡(luò)安全態(tài)勢(shì)量化評(píng)估模型
    網(wǎng)絡(luò)安全態(tài)勢(shì)感知國(guó)內(nèi)外研究現(xiàn)狀
    TD—LTE智能天線性能分析和應(yīng)用研究
    DCS控制系統(tǒng)在生產(chǎn)線物料運(yùn)輸工作的應(yīng)用
    科技視界(2016年4期)2016-02-22 13:05:13
    關(guān)于動(dòng)車(chē)組動(dòng)車(chē)轉(zhuǎn)向架的關(guān)鍵部件性能分析
    科技資訊(2015年7期)2015-07-02 19:04:05
    亚洲精品美女久久久久99蜜臀 | av免费观看日本| 成年女人在线观看亚洲视频| 久久久久人妻精品一区果冻| 欧美日韩成人在线一区二区| 欧美人与善性xxx| 久久精品久久久久久久性| www.精华液| 日韩一本色道免费dvd| 天天影视国产精品| 午夜激情av网站| 国产片内射在线| 国产黄频视频在线观看| 久久精品人人爽人人爽视色| h视频一区二区三区| 999久久久国产精品视频| 精品卡一卡二卡四卡免费| 高清av免费在线| 欧美日韩精品成人综合77777| 久久av网站| 狠狠婷婷综合久久久久久88av| 老熟女久久久| 久久午夜福利片| 精品久久蜜臀av无| 久久久久久久久久久久大奶| 99re6热这里在线精品视频| 亚洲伊人色综图| 欧美日韩精品网址| 人人澡人人妻人| 国产精品偷伦视频观看了| 中文字幕另类日韩欧美亚洲嫩草| 一个人免费看片子| 在线观看美女被高潮喷水网站| freevideosex欧美| 高清视频免费观看一区二区| 极品少妇高潮喷水抽搐| 丰满饥渴人妻一区二区三| 免费在线观看视频国产中文字幕亚洲 | 一边亲一边摸免费视频| 国产精品av久久久久免费| 亚洲第一av免费看| 人妻系列 视频| 久久99热这里只频精品6学生| 天天躁夜夜躁狠狠久久av| 久久久欧美国产精品| www日本在线高清视频| 国产精品三级大全| 一区二区av电影网| 这个男人来自地球电影免费观看 | 亚洲国产看品久久| 一区二区三区乱码不卡18| 99热国产这里只有精品6| 国产探花极品一区二区| 日韩视频在线欧美| 最近的中文字幕免费完整| 天堂8中文在线网| 成人国语在线视频| 美女脱内裤让男人舔精品视频| 熟妇人妻不卡中文字幕| 啦啦啦啦在线视频资源| 国产1区2区3区精品| 少妇人妻 视频| 你懂的网址亚洲精品在线观看| 精品视频人人做人人爽| 亚洲精品成人av观看孕妇| 亚洲精品日本国产第一区| 一二三四中文在线观看免费高清| 亚洲av电影在线进入| 久久久国产欧美日韩av| 国产精品熟女久久久久浪| 亚洲内射少妇av| 看非洲黑人一级黄片| 99精国产麻豆久久婷婷| 老汉色av国产亚洲站长工具| 精品一品国产午夜福利视频| 女人被躁到高潮嗷嗷叫费观| 下体分泌物呈黄色| 大片免费播放器 马上看| 亚洲欧洲精品一区二区精品久久久 | 午夜激情av网站| 2021少妇久久久久久久久久久| 多毛熟女@视频| 成人国语在线视频| 久久精品国产自在天天线| 日韩人妻精品一区2区三区| 成人亚洲精品一区在线观看| 91精品三级在线观看| av视频免费观看在线观看| 国产精品久久久av美女十八| 亚洲精品国产av蜜桃| 侵犯人妻中文字幕一二三四区| 国产亚洲最大av| 哪个播放器可以免费观看大片| 亚洲一码二码三码区别大吗| 久久精品国产亚洲av涩爱| 久久久久久久国产电影| 水蜜桃什么品种好| 亚洲国产最新在线播放| 男女无遮挡免费网站观看| 国产免费视频播放在线视频| 91久久精品国产一区二区三区| 国产有黄有色有爽视频| 熟女电影av网| 日日啪夜夜爽| 美女福利国产在线| 久久久久久久亚洲中文字幕| 三上悠亚av全集在线观看| www.av在线官网国产| 国产日韩欧美亚洲二区| 春色校园在线视频观看| 午夜免费鲁丝| 久久久久久久精品精品| 亚洲精品av麻豆狂野| 2021少妇久久久久久久久久久| 国产精品嫩草影院av在线观看| 国产日韩欧美视频二区| 亚洲伊人色综图| 天天影视国产精品| 黄片小视频在线播放| 伦精品一区二区三区| 久久久久精品人妻al黑| 最近中文字幕2019免费版| av网站免费在线观看视频| 制服诱惑二区| av福利片在线| 亚洲欧洲日产国产| 欧美国产精品一级二级三级| 少妇猛男粗大的猛烈进出视频| 久久午夜福利片| 热99国产精品久久久久久7| 水蜜桃什么品种好| 亚洲av综合色区一区| 国产深夜福利视频在线观看| 波多野结衣av一区二区av| 午夜免费观看性视频| 熟女av电影| 国产有黄有色有爽视频| 亚洲精品久久久久久婷婷小说| 日本av免费视频播放| 亚洲av男天堂| 精品国产一区二区久久| 日韩三级伦理在线观看| 亚洲精品国产色婷婷电影| 午夜老司机福利剧场| 最近的中文字幕免费完整| 亚洲欧美日韩另类电影网站| 久久久久久人妻| 亚洲国产看品久久| 欧美人与善性xxx| 精品酒店卫生间| 熟女电影av网| 91aial.com中文字幕在线观看| 亚洲伊人久久精品综合| 97在线视频观看| 黄色毛片三级朝国网站| 午夜激情av网站| 精品99又大又爽又粗少妇毛片| 午夜福利视频在线观看免费| 欧美激情 高清一区二区三区| 伦理电影大哥的女人| 免费观看av网站的网址| 美女主播在线视频| 午夜激情久久久久久久| 精品第一国产精品| 一区二区三区乱码不卡18| 日韩一区二区三区影片| 国产爽快片一区二区三区| 久久精品aⅴ一区二区三区四区 | 中文字幕另类日韩欧美亚洲嫩草| 制服丝袜香蕉在线| 久久这里只有精品19| 青春草亚洲视频在线观看| 2021少妇久久久久久久久久久| 国产成人欧美| 丁香六月天网| 亚洲人成网站在线观看播放| 亚洲经典国产精华液单| 天天操日日干夜夜撸| 国产精品一国产av| 亚洲精品国产一区二区精华液| 国产1区2区3区精品| 久久久久久免费高清国产稀缺| 精品亚洲成国产av| 欧美激情 高清一区二区三区| 免费观看av网站的网址| 久久精品久久久久久噜噜老黄| 国产精品人妻久久久影院| 久久人人爽av亚洲精品天堂| 成年人午夜在线观看视频| 亚洲伊人色综图| 久久鲁丝午夜福利片| 成年美女黄网站色视频大全免费| 国产黄频视频在线观看| 啦啦啦在线观看免费高清www| 中文字幕最新亚洲高清| 亚洲av免费高清在线观看| 国产精品蜜桃在线观看| 熟女av电影| 国产福利在线免费观看视频| 日韩伦理黄色片| 国产人伦9x9x在线观看 | 成人免费观看视频高清| 最新的欧美精品一区二区| av网站在线播放免费| 亚洲欧美清纯卡通| 人妻少妇偷人精品九色| 亚洲三区欧美一区| 国产成人精品一,二区| 亚洲人成77777在线视频| 亚洲av国产av综合av卡| 国产男人的电影天堂91| 免费观看性生交大片5| 我要看黄色一级片免费的| 日韩一区二区三区影片| 国产精品蜜桃在线观看| 国产成人一区二区在线| 成年美女黄网站色视频大全免费| 国产极品粉嫩免费观看在线| 欧美另类一区| 国产成人免费观看mmmm| 日本av免费视频播放| 大片电影免费在线观看免费| 9191精品国产免费久久| 18禁动态无遮挡网站| 免费看不卡的av| 黄频高清免费视频| 精品久久久久久电影网| 中国国产av一级| 国产成人a∨麻豆精品| 欧美日韩精品网址| 天天躁狠狠躁夜夜躁狠狠躁| 丝袜美腿诱惑在线| 性少妇av在线| 最近中文字幕高清免费大全6| 国产 精品1| 天天躁狠狠躁夜夜躁狠狠躁| 99国产综合亚洲精品| 又大又黄又爽视频免费| 天堂8中文在线网| 人妻少妇偷人精品九色| 免费看av在线观看网站| 一区福利在线观看| 美女脱内裤让男人舔精品视频| av在线观看视频网站免费| 亚洲成国产人片在线观看| 免费在线观看视频国产中文字幕亚洲 | 只有这里有精品99| 777米奇影视久久| 一本久久精品| 999久久久国产精品视频| 80岁老熟妇乱子伦牲交| 寂寞人妻少妇视频99o| 99香蕉大伊视频| 两个人看的免费小视频| 亚洲精品第二区| 免费看不卡的av| 母亲3免费完整高清在线观看 | 久久人人爽av亚洲精品天堂| 国产精品免费视频内射| 精品国产一区二区三区四区第35| 熟女av电影| 亚洲av日韩在线播放| 成人国产av品久久久| 久久久久久免费高清国产稀缺| 久久精品国产亚洲av天美| 国产又色又爽无遮挡免| 久久久亚洲精品成人影院| 成人国产av品久久久| 国产xxxxx性猛交| 在线天堂中文资源库| 欧美日韩一级在线毛片| 啦啦啦在线免费观看视频4| 老汉色∧v一级毛片| 精品少妇黑人巨大在线播放| 2022亚洲国产成人精品| 欧美日韩亚洲国产一区二区在线观看 | 人妻一区二区av| 交换朋友夫妻互换小说| 成年女人毛片免费观看观看9 | 高清av免费在线| 久久久久网色| 极品少妇高潮喷水抽搐| 天堂中文最新版在线下载| 最近最新中文字幕免费大全7| 中文字幕最新亚洲高清| 久久久久国产精品人妻一区二区| 亚洲欧美色中文字幕在线| 美女脱内裤让男人舔精品视频| 26uuu在线亚洲综合色| 国产精品三级大全| 久久久久国产精品人妻一区二区| 狠狠精品人妻久久久久久综合| 精品一品国产午夜福利视频| 国产高清不卡午夜福利| 欧美日韩一区二区视频在线观看视频在线| 1024视频免费在线观看| 一级毛片电影观看| www日本在线高清视频| 天天影视国产精品| 免费观看在线日韩| 久久久久久久国产电影| 亚洲精品一二三| 哪个播放器可以免费观看大片| 搡老乐熟女国产| 性色av一级| 久久精品国产亚洲av涩爱| 亚洲美女视频黄频| 99久久综合免费| 九九爱精品视频在线观看| 99国产精品免费福利视频| 超色免费av| 丰满迷人的少妇在线观看| 欧美成人午夜精品| 18禁国产床啪视频网站| 99香蕉大伊视频| 99九九在线精品视频| 少妇精品久久久久久久| 国产女主播在线喷水免费视频网站| 亚洲欧美成人综合另类久久久| 一二三四中文在线观看免费高清| 亚洲国产成人一精品久久久| 看免费成人av毛片| 成人黄色视频免费在线看| 亚洲精品av麻豆狂野| 国产精品久久久av美女十八| 纵有疾风起免费观看全集完整版| 一级片'在线观看视频| 亚洲欧美日韩另类电影网站| 久久久欧美国产精品| 国产极品天堂在线| 搡老乐熟女国产| 国产欧美日韩一区二区三区在线| 亚洲国产精品999| 26uuu在线亚洲综合色| 咕卡用的链子| 一区二区日韩欧美中文字幕| 一区在线观看完整版| 又黄又粗又硬又大视频| 国产成人精品一,二区| 超色免费av| 嫩草影院入口| 精品一区二区三卡| 亚洲精品日韩在线中文字幕| av国产精品久久久久影院| 女的被弄到高潮叫床怎么办| 久久久欧美国产精品| 1024视频免费在线观看| 国产成人av激情在线播放| www.自偷自拍.com| 男女免费视频国产| 9色porny在线观看| 十八禁高潮呻吟视频| 男的添女的下面高潮视频| 欧美另类一区| 天堂俺去俺来也www色官网| 波野结衣二区三区在线| 国产亚洲欧美精品永久| www日本在线高清视频| 亚洲视频免费观看视频| 又大又黄又爽视频免费| 婷婷色综合www| 亚洲第一青青草原| 日本wwww免费看| 亚洲欧美精品综合一区二区三区 | 亚洲av中文av极速乱| 色视频在线一区二区三区| 久久久国产欧美日韩av| 精品人妻偷拍中文字幕| 黄色怎么调成土黄色| 亚洲少妇的诱惑av| 一级片免费观看大全| 啦啦啦视频在线资源免费观看| 黄色 视频免费看| 欧美xxⅹ黑人| 国产一区二区 视频在线| 亚洲精品一区蜜桃| 人成视频在线观看免费观看| 久久人人爽av亚洲精品天堂| 欧美av亚洲av综合av国产av | 美女大奶头黄色视频| 中国国产av一级| 丁香六月天网| 黄片无遮挡物在线观看| 91在线精品国自产拍蜜月| 久久人人97超碰香蕉20202| 午夜福利网站1000一区二区三区| 男女边吃奶边做爰视频| 女性被躁到高潮视频| 在线精品无人区一区二区三| av免费在线看不卡| 久久久久精品性色| 国产在线免费精品| 国产男人的电影天堂91| 日韩中文字幕欧美一区二区 | 下体分泌物呈黄色| 久久鲁丝午夜福利片| 菩萨蛮人人尽说江南好唐韦庄| 夜夜骑夜夜射夜夜干| 蜜桃在线观看..| 又大又黄又爽视频免费| 狂野欧美激情性bbbbbb| 日本黄色日本黄色录像| 大码成人一级视频| 麻豆乱淫一区二区| 久久精品国产鲁丝片午夜精品| 国产成人精品无人区| 在线观看国产h片| 丝瓜视频免费看黄片| 街头女战士在线观看网站| 2021少妇久久久久久久久久久| 国产不卡av网站在线观看| 国产精品秋霞免费鲁丝片| 国产黄色视频一区二区在线观看| a级片在线免费高清观看视频| 青草久久国产| av国产久精品久网站免费入址| 午夜精品国产一区二区电影| 1024视频免费在线观看| 午夜91福利影院| 亚洲精华国产精华液的使用体验| 久久精品国产自在天天线| av不卡在线播放| 久久鲁丝午夜福利片| 777米奇影视久久| 久久精品国产鲁丝片午夜精品| 中文字幕人妻丝袜制服| 两个人看的免费小视频| 久久精品国产鲁丝片午夜精品| 精品国产乱码久久久久久男人| 多毛熟女@视频| 亚洲美女搞黄在线观看| 成年美女黄网站色视频大全免费| 亚洲内射少妇av| 久久久久久人人人人人| 天堂中文最新版在线下载| 久久韩国三级中文字幕| 赤兔流量卡办理| 成人国语在线视频| 久久久久久久国产电影| 日产精品乱码卡一卡2卡三| 一级毛片电影观看| 男女午夜视频在线观看| 青草久久国产| 成人影院久久| 伊人久久国产一区二区| 香蕉国产在线看| 亚洲精品日本国产第一区| 国产男女超爽视频在线观看| 一级毛片电影观看| 亚洲国产毛片av蜜桃av| 黄片无遮挡物在线观看| 久久国内精品自在自线图片| 亚洲男人天堂网一区| 大片电影免费在线观看免费| 新久久久久国产一级毛片| 视频区图区小说| 国产精品一二三区在线看| 在线天堂最新版资源| 啦啦啦视频在线资源免费观看| 考比视频在线观看| 欧美精品国产亚洲| 自线自在国产av| 最新的欧美精品一区二区| 97人妻天天添夜夜摸| 香蕉丝袜av| 久久精品久久精品一区二区三区| 久久精品aⅴ一区二区三区四区 | 大片免费播放器 马上看| 久久国产精品男人的天堂亚洲| 国产亚洲精品第一综合不卡| 日韩人妻精品一区2区三区| 久久97久久精品| 久久久欧美国产精品| 亚洲欧洲国产日韩| 99久久综合免费| 男女无遮挡免费网站观看| 国产国语露脸激情在线看| 热re99久久精品国产66热6| 人体艺术视频欧美日本| 又大又黄又爽视频免费| 2021少妇久久久久久久久久久| 免费看不卡的av| 街头女战士在线观看网站| 欧美日韩av久久| 伊人亚洲综合成人网| 婷婷色综合www| 免费观看在线日韩| 亚洲成人手机| 伦精品一区二区三区| 熟女少妇亚洲综合色aaa.| 亚洲图色成人| 日本午夜av视频| 一二三四在线观看免费中文在| 免费高清在线观看日韩| 亚洲色图综合在线观看| 宅男免费午夜| 搡老乐熟女国产| 精品亚洲成国产av| 性少妇av在线| 自线自在国产av| 看非洲黑人一级黄片| 婷婷成人精品国产| 边亲边吃奶的免费视频| 天天躁日日躁夜夜躁夜夜| 十八禁网站网址无遮挡| av天堂久久9| 亚洲精华国产精华液的使用体验| 各种免费的搞黄视频| 久久精品国产亚洲av天美| 亚洲精品日韩在线中文字幕| 少妇 在线观看| 亚洲av欧美aⅴ国产| 免费日韩欧美在线观看| 亚洲第一区二区三区不卡| 毛片一级片免费看久久久久| 亚洲,欧美精品.| 日本猛色少妇xxxxx猛交久久| 精品亚洲成a人片在线观看| 婷婷色麻豆天堂久久| 侵犯人妻中文字幕一二三四区| 九草在线视频观看| 国产高清国产精品国产三级| 另类亚洲欧美激情| 国产精品一区二区在线不卡| 蜜桃在线观看..| 久久ye,这里只有精品| 少妇被粗大的猛进出69影院| 欧美少妇被猛烈插入视频| 久久精品熟女亚洲av麻豆精品| 国产成人精品在线电影| 欧美日韩视频高清一区二区三区二| 久久久欧美国产精品| 精品午夜福利在线看| 国产亚洲av片在线观看秒播厂| 免费在线观看黄色视频的| 亚洲三区欧美一区| 日本免费在线观看一区| 亚洲四区av| 成年人免费黄色播放视频| 青青草视频在线视频观看| 热99久久久久精品小说推荐| 色哟哟·www| 在线观看一区二区三区激情| 99久久中文字幕三级久久日本| 久久久久久人人人人人| 哪个播放器可以免费观看大片| 国产成人欧美| 国产精品一国产av| 亚洲国产欧美日韩在线播放| 看非洲黑人一级黄片| 飞空精品影院首页| 婷婷色综合大香蕉| 黄网站色视频无遮挡免费观看| 日韩av不卡免费在线播放| 成年人午夜在线观看视频| 1024视频免费在线观看| 亚洲精品国产一区二区精华液| 亚洲av免费高清在线观看| 久久99一区二区三区| 2021少妇久久久久久久久久久| 亚洲第一区二区三区不卡| 亚洲精品国产av成人精品| 欧美日韩综合久久久久久| 日日爽夜夜爽网站| 日韩熟女老妇一区二区性免费视频| 国产精品女同一区二区软件| h视频一区二区三区| 一级片'在线观看视频| 成人午夜精彩视频在线观看| 亚洲欧洲日产国产| av在线app专区| 色吧在线观看| 一级爰片在线观看| 自拍欧美九色日韩亚洲蝌蚪91| 美女xxoo啪啪120秒动态图| 两个人免费观看高清视频| 一级毛片电影观看| 高清视频免费观看一区二区| 国产亚洲最大av| 国产在线视频一区二区| 日本爱情动作片www.在线观看| 深夜精品福利| 国产一区二区 视频在线| 日韩,欧美,国产一区二区三区| av国产精品久久久久影院| 国产一区二区三区综合在线观看| 91在线精品国自产拍蜜月| 赤兔流量卡办理| 伦理电影免费视频| 国产精品不卡视频一区二区| 成人18禁高潮啪啪吃奶动态图| 国产精品国产av在线观看| 夫妻午夜视频| 亚洲男人天堂网一区| 久久 成人 亚洲| 亚洲av电影在线进入| 国产精品熟女久久久久浪| 91午夜精品亚洲一区二区三区| 国产精品99久久99久久久不卡 | 欧美日韩综合久久久久久| 性色avwww在线观看| 成年美女黄网站色视频大全免费| 国产老妇伦熟女老妇高清| 久久久久久久久久久久大奶| 日韩一区二区三区影片| 这个男人来自地球电影免费观看 | 麻豆乱淫一区二区| 街头女战士在线观看网站| 久久人人97超碰香蕉20202| 国产一区亚洲一区在线观看| 久久婷婷青草| 多毛熟女@视频| 久久精品国产亚洲av涩爱| 王馨瑶露胸无遮挡在线观看| 夫妻性生交免费视频一级片|