• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    自動(dòng)化測(cè)試框架技術(shù)及應(yīng)用

    2016-11-17 08:56:09鄧璐娟李金萌董東曉
    關(guān)鍵詞:函數(shù)庫(kù)關(guān)鍵字測(cè)試用例

    鄧璐娟,李金萌,董東曉

    (鄭州輕工業(yè)學(xué)院 計(jì)算機(jī)與通信工程學(xué)院,鄭州 450001)

    ?

    自動(dòng)化測(cè)試框架技術(shù)及應(yīng)用

    鄧璐娟,李金萌,董東曉

    (鄭州輕工業(yè)學(xué)院 計(jì)算機(jī)與通信工程學(xué)院,鄭州 450001)

    自動(dòng)化測(cè)試技術(shù)是軟件測(cè)試未來(lái)的發(fā)展方向,自動(dòng)化測(cè)試過(guò)程中會(huì)遇到測(cè)試腳本維護(hù)困難、腳本維護(hù)工作量大、重用性差、測(cè)試效率低的問(wèn)題;怎樣引入自動(dòng)化測(cè)試框架技術(shù)解決上面的問(wèn)題是測(cè)試工程師一直在探討和研究的主流問(wèn)題;探討研究了在自動(dòng)化測(cè)試框架技術(shù)應(yīng)用過(guò)程中遇到的下列問(wèn)題:腳本庫(kù)中測(cè)試腳本存放技術(shù);測(cè)試用例設(shè)計(jì)技術(shù);測(cè)試數(shù)據(jù)的管理和分類(lèi)技術(shù);對(duì)象庫(kù)共享技術(shù)等;初步達(dá)到了以下結(jié)果:提高了測(cè)試代碼的可重用性和可維護(hù)性,測(cè)試執(zhí)行更有效,從而降低了測(cè)試成本;最后使用了協(xié)同辦公平臺(tái)實(shí)例,從而證明了基于QTP的協(xié)同辦公平臺(tái)的自動(dòng)化測(cè)試框架可以降低多余的代碼量,加快代碼生成速度,縮小測(cè)試周期等特點(diǎn),從而提高代碼的利用率和可維護(hù)性。

    軟件測(cè)試;自動(dòng)化測(cè)試;自動(dòng)化測(cè)試框架

    0 引言

    軟件測(cè)試過(guò)程中,總是遇到測(cè)試成本高、執(zhí)行繁瑣、效率低,不能滿(mǎn)足軟件產(chǎn)品迭代研發(fā)的要求。解決辦法有1)引入自動(dòng)化測(cè)試。減少手工測(cè)試的重復(fù)勞動(dòng)工作量,可以在特定的時(shí)間里不斷地提高測(cè)試效率。2)建立自動(dòng)化測(cè)試框架。提高腳本的可重復(fù)性,從而減少腳本維護(hù)工作量。

    自動(dòng)化測(cè)試技術(shù)主要包括錄制/回放技術(shù)、腳本技術(shù)、數(shù)據(jù)驅(qū)動(dòng)技術(shù)和關(guān)鍵字驅(qū)動(dòng)技術(shù)等[1-4]。在自動(dòng)化測(cè)試技術(shù)中,錄制/回放技術(shù)是最基礎(chǔ)和最基本的,目前的負(fù)載測(cè)試中大部分都是采用該技術(shù)進(jìn)行測(cè)試的。腳本技術(shù)不可缺少的部分是腳本的共享。數(shù)據(jù)驅(qū)動(dòng)技術(shù)可以將測(cè)試數(shù)據(jù)和腳本分開(kāi)存儲(chǔ),從而提高了腳本的利用率和維護(hù)性,卻因?yàn)轫?yè)面的改變而受到不同程序的變化。在關(guān)鍵字驅(qū)動(dòng)技術(shù)當(dāng)中使用到的關(guān)鍵字主要是:被操作對(duì)象(Item)、操作(Operation)和值(Value),對(duì)關(guān)鍵字進(jìn)行設(shè)置,從而可以通過(guò)關(guān)鍵字進(jìn)行自動(dòng)化測(cè)試。

    1 自動(dòng)化測(cè)試框架及原理

    1.1 自動(dòng)化測(cè)試框架

    常用的自動(dòng)化測(cè)試框架包括數(shù)據(jù)驅(qū)動(dòng)的測(cè)試框架(Data-driven testing)、關(guān)鍵字驅(qū)動(dòng)的測(cè)試框架(Keyword- driven testing) 、模塊驅(qū)動(dòng)的測(cè)試框架(Module-driven testing)、混合型測(cè)試框架(Hybrid testing)。不同的測(cè)試框架有其各自的特點(diǎn)和相應(yīng)的工具支持[5-9]。

    1)使用數(shù)據(jù)驅(qū)動(dòng)的測(cè)試框架主要采用模型化設(shè)計(jì)思想,從而減少了多余的測(cè)試腳本,降低生成和維護(hù)測(cè)試腳本的費(fèi)用;在測(cè)試的過(guò)程中,可以輸入相應(yīng)的數(shù)據(jù)驗(yàn)證其正確性;將生成的預(yù)期結(jié)果和測(cè)試腳本單獨(dú)存儲(chǔ),將預(yù)期結(jié)果存儲(chǔ)在單獨(dú)的數(shù)據(jù)文件當(dāng)中,這樣測(cè)試人員可以更加方便地進(jìn)行相應(yīng)的增加、刪除和維護(hù);在測(cè)試的過(guò)程中,一邊測(cè)試一邊得到測(cè)試結(jié)果,在輸入數(shù)據(jù)的過(guò)程中生成相應(yīng)的測(cè)試結(jié)果,從而減少了手工測(cè)試的過(guò)程。數(shù)據(jù)驅(qū)動(dòng)的測(cè)試框架支持工具有Functional Tester、WebKing、Rational Robot、Winrunner、QTP等。

    2)使用關(guān)鍵字驅(qū)動(dòng)的測(cè)試框架主要是可以實(shí)現(xiàn)腳本、數(shù)據(jù)和業(yè)務(wù)三者之間真正地分離,使用關(guān)鍵字形式把測(cè)試的整個(gè)流程存放到相應(yīng)的數(shù)據(jù)文件當(dāng)中;腳本的獲取根據(jù)功能的需要進(jìn)行設(shè)計(jì),提高了其擴(kuò)展性;關(guān)鍵字的設(shè)計(jì)采用了分解的方式,可以將其移到其他的數(shù)據(jù)庫(kù)和系統(tǒng)當(dāng)中。關(guān)鍵字驅(qū)動(dòng)的測(cè)試框架支持工具有SAFS、EMOS Framework、SDT、TestFrame、TestQuest Pro、QuickTest Professional(QTP)等。

    3)模塊驅(qū)動(dòng)的測(cè)試框架采用的是抽象和封裝,在對(duì)框架進(jìn)行設(shè)計(jì)的過(guò)程中,可以無(wú)需關(guān)心一些詳細(xì)的應(yīng)用和細(xì)節(jié),在整個(gè)框架進(jìn)行設(shè)計(jì)的過(guò)程中提出相應(yīng)的接口來(lái)對(duì)腳本的詳細(xì)過(guò)程進(jìn)行保密,從而避免了測(cè)試腳本因?yàn)槠渌a的改變受到相應(yīng)的影響。模塊驅(qū)動(dòng)的測(cè)試框架支持工具主要有QTP。

    4)混合型測(cè)試框架是集合數(shù)據(jù)驅(qū)動(dòng)和關(guān)鍵字驅(qū)動(dòng)測(cè)試框架這兩種的優(yōu)點(diǎn)而生成的一種自動(dòng)化測(cè)試框架[10-12]。因?yàn)槠渚哂袛?shù)據(jù)和關(guān)鍵字驅(qū)動(dòng)測(cè)試框架兩種類(lèi)型的優(yōu)點(diǎn),目前,被很多人使用。其支持工具主要有QTP。

    因此,本文采用的是混合型測(cè)試框架,選擇現(xiàn)在最流行的測(cè)試工具QTP支撐自動(dòng)化測(cè)試?;旌闲蜏y(cè)試框架將所有的數(shù)據(jù)和用例都存儲(chǔ)在測(cè)試數(shù)據(jù)庫(kù)當(dāng)中,腳本和測(cè)試版本都存儲(chǔ)在腳本庫(kù)當(dāng)中,常用函數(shù)和通用函數(shù)存放在函數(shù)庫(kù)中,在函數(shù)庫(kù)中加入了歷史庫(kù),存放已經(jīng)使用過(guò)的函數(shù),更加有利于方便共享,而且還可以自動(dòng)生成比較詳細(xì)的測(cè)試報(bào)告。

    1.2 系統(tǒng)結(jié)構(gòu)及原理

    混合型自動(dòng)測(cè)試框架主要有以下幾個(gè)部分組成,分別是腳本庫(kù)、對(duì)象庫(kù)、測(cè)試數(shù)據(jù)庫(kù)、函數(shù)庫(kù)、驅(qū)動(dòng)層、測(cè)試報(bào)告、日志、配置文件、測(cè)試工具QTP與被測(cè)程序等,自動(dòng)測(cè)試框架體系,如圖1。

    圖1 自動(dòng)測(cè)試框架體系

    1.2.1 腳本庫(kù)的自動(dòng)化測(cè)試框架

    腳本庫(kù)用來(lái)存放編輯好的自動(dòng)化測(cè)試腳本,腳本庫(kù)主要分為腳本執(zhí)行庫(kù)和腳本版本庫(kù)。QTP可直接執(zhí)行腳本庫(kù)中的腳本,利用QTP中的專(zhuān)家視圖對(duì)腳本完善和環(huán)境設(shè)置。執(zhí)行的測(cè)試腳本中的Action可以共享和重復(fù)使用的;簡(jiǎn)單明了,共享腳本降低了測(cè)試的成本;減少了開(kāi)發(fā)時(shí)間。

    在測(cè)試腳本開(kāi)發(fā)時(shí)采用VBScript作為開(kāi)發(fā)語(yǔ)言,可以提高測(cè)試效率。采用的技術(shù)是數(shù)據(jù)和關(guān)鍵字兩者相結(jié)合的測(cè)試技術(shù)。前者可以提高測(cè)試對(duì)象的變更能力、腳本的靈活性和覆蓋面。而后者可以將腳本、數(shù)據(jù)、業(yè)務(wù)三者之間分開(kāi),降低耦合性,從而提高靈活性。腳本版本庫(kù)是存放更新發(fā)布的腳本,測(cè)試版本隨著系統(tǒng)的不斷變化而更新,在開(kāi)發(fā)流程中對(duì)腳本版本進(jìn)行管理和維護(hù),以提高腳本的有效性。版本的管理使用SVN(Subversion),每次版本的定義按照版本管理的規(guī)則執(zhí)行。

    1.2.2 對(duì)象庫(kù)的自動(dòng)化測(cè)試框架

    對(duì)象庫(kù)中主要存放的是在測(cè)試過(guò)程當(dāng)中所有的對(duì)象。對(duì)象庫(kù)由描述性和共享性對(duì)象庫(kù)兩者組成,在共享對(duì)象庫(kù)當(dāng)中,需要?jiǎng)?chuàng)建一個(gè)可以進(jìn)行共享的公用對(duì)象庫(kù),共享對(duì)象文件是以.tsr的格式存放在共享對(duì)象庫(kù)中,可以讓腳本的測(cè)試人員和腳本的開(kāi)發(fā)人員進(jìn)行調(diào)用,但只能調(diào)用卻沒(méi)有權(quán)限進(jìn)行修改。在QTP中,我們對(duì)一個(gè)功能點(diǎn)進(jìn)行測(cè)試,測(cè)試之后把對(duì)象庫(kù)中的對(duì)象以.tsr的格式進(jìn)行導(dǎo)出,進(jìn)行共享,導(dǎo)入共享的.tsr文件(導(dǎo)入共享文件的步驟是在Resource/Associate- Repositories中關(guān)聯(lián)對(duì)應(yīng)的對(duì)象庫(kù))后就可以執(zhí)行調(diào)用的相關(guān)對(duì)象。

    1.2.3 測(cè)試數(shù)據(jù)庫(kù)

    在測(cè)試數(shù)據(jù)庫(kù)當(dāng)中,主要是由數(shù)據(jù)與用例庫(kù)兩者組成。對(duì)于測(cè)試用例的設(shè)計(jì)主要使用模板形式,把編寫(xiě)規(guī)范化的測(cè)試用例存儲(chǔ)在Excel表格中,測(cè)試用例的模板中主要采用的字段為測(cè)試功能模塊(TestModel)、測(cè)試用例編號(hào)(Test_ID)、測(cè)試用例名字(Test_Name)、測(cè)試步驟(Test_Step)、描述性信息(Test_Description)、測(cè)試數(shù)據(jù)(Test_Data)、檢查點(diǎn)(Test_CheckPoint)、預(yù)期結(jié)果(Test_Expectation)、測(cè)試結(jié)果(Test_Result)。測(cè)試數(shù)據(jù)的管理利用Excel報(bào)表的功能對(duì)數(shù)據(jù)進(jìn)行管理和分類(lèi),如果需要查看相應(yīng)的數(shù)據(jù),可以根據(jù)與測(cè)試用例相關(guān)的編號(hào)進(jìn)行查詢(xún),這樣可以保證測(cè)試的數(shù)據(jù)和測(cè)試用例的一致性。

    1.2.4 函數(shù)庫(kù)

    函數(shù)庫(kù)主要是為測(cè)試腳本提供接口函數(shù),主要分為常用和通用函數(shù)。常用函數(shù)是運(yùn)行測(cè)試腳本時(shí)調(diào)用較頻繁的函數(shù),例如,數(shù)據(jù)庫(kù)訪問(wèn),文件打開(kāi)等等。通用函數(shù)是一些通用的自定義函數(shù),能提供給測(cè)試腳本進(jìn)行使用。

    在函數(shù)庫(kù)中加入歷史庫(kù),每次使用過(guò)的函數(shù)都放入里面,方便下次使用和共享該函數(shù),提高效率。

    1.2.5 驅(qū)動(dòng)模塊

    驅(qū)動(dòng)模塊是自動(dòng)化測(cè)試框架中不可缺少與重要的部分。主要是由腳本、數(shù)據(jù)、測(cè)試執(zhí)行與測(cè)試用例驅(qū)動(dòng)器四部分組成。數(shù)據(jù)驅(qū)動(dòng)器是把所有的測(cè)試數(shù)據(jù)用Excel格式進(jìn)行統(tǒng)一的保存,該表格中的權(quán)限進(jìn)行設(shè)置,只能供其他人調(diào)用,但沒(méi)有權(quán)限進(jìn)行修改。第三種主要是通過(guò)對(duì)用例的分析,經(jīng)過(guò)分析結(jié)果來(lái)對(duì)腳本進(jìn)行調(diào)用和使用。第四種主要是通過(guò)對(duì)測(cè)試用例當(dāng)中的數(shù)據(jù)進(jìn)行分析用于解析測(cè)試用例中數(shù)據(jù)文件,經(jīng)過(guò)分析結(jié)果來(lái)對(duì)相應(yīng)的數(shù)據(jù)和腳本進(jìn)行使用。

    1.2.6 配置文件

    配置文件主要是由QTP中的一些信息,例如,初始化設(shè)置,操作系統(tǒng),測(cè)試數(shù)據(jù)與測(cè)試用例存放路徑等等,以XML 形式存儲(chǔ)相關(guān)配置信息。

    2 自動(dòng)化測(cè)試框架技術(shù)實(shí)現(xiàn)

    2.1 數(shù)據(jù)和腳本分離

    采用VBScript腳本開(kāi)發(fā)技術(shù),用Excel對(duì)數(shù)據(jù)進(jìn)行保存。在QC中,可以對(duì)測(cè)試數(shù)據(jù)、測(cè)試用例和測(cè)試腳本進(jìn)行管理,并分開(kāi)保存。

    2.2 腳本的復(fù)用

    在測(cè)試框架中,Action的復(fù)用方式,主要采用的方法,在選擇“Reusable action”,只有選擇了才能對(duì)Action進(jìn)行復(fù)用,如圖2。

    可以把業(yè)務(wù)功能中通用的部分設(shè)置為可循環(huán)的Action腳本,這樣,腳本的復(fù)用率大大提高。

    圖2 腳本復(fù)用設(shè)置

    2.3 資源共享

    建立對(duì)象庫(kù)的方法:1)通過(guò)QTP對(duì)被協(xié)同辦公平臺(tái)進(jìn)行錄制;2)描述性編程。以上兩種方法,我們采用的是第一種通過(guò)自動(dòng)化測(cè)試工具QTP對(duì)其進(jìn)行錄制,對(duì)象庫(kù)可以進(jìn)行共享,供測(cè)試人員和開(kāi)發(fā)人員調(diào)用,錄制的對(duì)象庫(kù),從而可以實(shí)現(xiàn)對(duì)象庫(kù)的共享。如圖3所示。

    圖3 對(duì)象倉(cāng)庫(kù)

    將自動(dòng)化測(cè)試工具(QTP)連接測(cè)試管理平臺(tái)(QC)后可同時(shí)為開(kāi)發(fā)團(tuán)隊(duì)和測(cè)試團(tuán)隊(duì)提供資源的共享,例如數(shù)據(jù)、腳本、測(cè)試用例等方面。連接步驟:1)輸入測(cè)試管理服務(wù)器地址;2)確認(rèn)用戶(hù)名和密碼。

    QC是目前使用頻繁的一款測(cè)試管理工具,主要是用來(lái)管理測(cè)試流程、保存測(cè)試用例、測(cè)試執(zhí)行、記錄bug等。在自動(dòng)化測(cè)試框架當(dāng)中,為測(cè)試人員提供相應(yīng)接口,測(cè)試人員需要在接口中輸入登錄QC的相關(guān)信息和QTP的絕對(duì)路徑,連接成功后可自動(dòng)地把QTP測(cè)試的腳本放到QC上面。

    其它的自動(dòng)化測(cè)試管理平臺(tái)資源也可共享。

    3 實(shí)際應(yīng)用與分析

    協(xié)同辦公平臺(tái)中主要有企業(yè)信息、部門(mén)事務(wù)、個(gè)人辦公、協(xié)同工作、文化長(zhǎng)廊、人事、資源中心、實(shí)用工具、系統(tǒng)設(shè)置等功能,對(duì)協(xié)同辦公系統(tǒng)中這些功能進(jìn)行自動(dòng)化測(cè)試,如果假設(shè)重復(fù)執(zhí)行的測(cè)試用例是2次與測(cè)試范圍一致,我們得到了以下基于QTP的協(xié)同辦公平臺(tái)的自動(dòng)化測(cè)試框架測(cè)試、簡(jiǎn)單自動(dòng)化測(cè)試和手工測(cè)試的比較結(jié)果,如表1所示。

    從表1中的數(shù)據(jù)可知,使用本框架進(jìn)行自動(dòng)化測(cè)試比手工測(cè)試節(jié)省30%左右的時(shí)間,比簡(jiǎn)單的自動(dòng)化測(cè)試節(jié)省18%左右的時(shí)間,當(dāng)測(cè)試用例執(zhí)行次數(shù)越來(lái)越多時(shí),節(jié)省的時(shí)間就會(huì)越來(lái)越多。由此可見(jiàn),基于QTP的辦公系統(tǒng)的自動(dòng)化測(cè)試框架可以節(jié)省辦公系統(tǒng)的測(cè)試時(shí)間,把節(jié)省的時(shí)間可以運(yùn)用到更復(fù)雜的測(cè)試和必須使用手工測(cè)試上面,同時(shí),基于QTP的協(xié)同辦公平臺(tái)的自動(dòng)化測(cè)試框架也可以減少20%~30%腳本編寫(xiě)工作,從而降低了后期維護(hù)的難度。

    表1 基于QTP的自動(dòng)化測(cè)試、簡(jiǎn)單自動(dòng)化測(cè)試和手工測(cè)試的比較

    4 結(jié)語(yǔ)

    本文主要對(duì)混合型自動(dòng)化測(cè)試框架進(jìn)行了應(yīng)用研究,提出了自動(dòng)化測(cè)試框架體系,分別由腳本庫(kù)、對(duì)象庫(kù)、測(cè)試數(shù)據(jù)庫(kù)、函數(shù)庫(kù)、驅(qū)動(dòng)模塊、配置文件、日志與測(cè)試報(bào)告等幾部分組成。協(xié)同辦公平臺(tái)中的實(shí)際測(cè)試應(yīng)用證明:基于QTP的協(xié)同辦公平臺(tái)的自動(dòng)測(cè)試框架可以降低多余的代碼量,加快代碼生成的速度,縮小測(cè)試周期等特點(diǎn),從而提高代碼的利用率和可維護(hù)性。同時(shí),把該自動(dòng)化測(cè)試框架使用到其他相同類(lèi)型或者相近類(lèi)型的項(xiàng)目當(dāng)中,也能減少大量的測(cè)試費(fèi)用。

    [1] Kao C H, Chi P H, Lee Y H. Automatic Testing Framework for Virtualization Environment[A]. Software Reliability Engineering Workshops (ISSREW), 2014 IEEE International Symposium on[C]. IEEE, 2014:134-135.

    [2] 俞戴龍. QTP自動(dòng)化測(cè)試框架的企業(yè)級(jí)應(yīng)用[D]. 上海:復(fù)旦大學(xué), 2010.

    [3] 王 敏, 王智超, 余 楊. 基于QTP的數(shù)據(jù)庫(kù)系統(tǒng)測(cè)試框架[J]. 計(jì)算機(jī)與數(shù)字工程, 2014, 42:117-121.

    [4] Guo S. Research on Automatic Testing Framework[J]. Applied Mechanics & Materials, 2014, 635-637:1594-1598.

    [5] Xiang Yun, Wen Jing. Automatic testing framework for Internet applications[A]. Communication Software and Networks (ICCSN), 2011 IEEE 3rd International Conference on[C]. IEEE, 2011:35-37.

    [6] 趙建平, 劉曉陽(yáng), 趙建輝,等. 一種輕量級(jí)軟件自動(dòng)化測(cè)試框架[J]. 火力與指揮控制, 2014(7):179-183.

    [7] 姚 杰, 程光鈞, 李 浩. 基于數(shù)據(jù)驅(qū)動(dòng)自動(dòng)化測(cè)試框架研究和實(shí)現(xiàn)[J]. 工業(yè)控制計(jì)算機(jī),2013,26:67-69.

    [8] 束 進(jìn). 基于QTP的高速公路收費(fèi)軟件自動(dòng)測(cè)試框架[J]. 上海船舶運(yùn)輸科學(xué)研究所學(xué)報(bào), 2014, 37:56-60.

    [9] 黃文高.QTP自動(dòng)化測(cè)試與框架模型設(shè)計(jì)[M]. 北京:機(jī)械工業(yè)出版社, 2008.

    [10] 田艷琴.QTP從實(shí)踐到精通[M]. 北京:電子工業(yè)出版社, 2010.

    [11] 劉 霞. 基于QTP的GUI數(shù)據(jù)驅(qū)動(dòng)自動(dòng)化測(cè)試框架[D]. 上海:復(fù)旦大學(xué), 2009.

    [12] 張 鶴. 基于QTP的自動(dòng)化測(cè)試研究與實(shí)現(xiàn)[D]. 哈爾濱:哈爾濱工程大學(xué), 2011.

    Technology of Automatic Testing Framework and Application

    Deng Lujuan,Li Jinmeng,Dong Dongxiao

    (School of Computer and Communication Engineering, Zhengzhou University of Light Industry,Zhengzhou 450001, China)

    Automation testing technology is the development direction of software testing in the future. In the process of automatic testing, it will encounter many problems that maintainability is hard, the workload of the script maintenance is big, reusability of the test scripts are poor, the efficiency of testing is low, and so on. Test engineers have been in the mainstream of research and research is that how to introduce the technology of automatic testing framework to solve the above problems. This paper discusses the following questions in the applying process of automatic testing framework: the technology of storing testing script in the script library; the technology of designing test case; the technology of managing and classifying test data; the technology of sharing object library, and so on. Preliminary achieving the following results: improving the reusability and maintainability of test code, promoting the availability of testing execution, thereby reducing the test cost. Finally, we use the collaborative office platform as an example. The automatic testing framework based on QTP of collaboration office platform can reduce the amount of redundant code, speed up the speed of the code generation and reduce the test cycle ,and so on. It also can improve the utilization and maintenance of the code.

    software testing; automatic testing; automatic testing framework

    2016-03-09;

    2016-04-29。

    河南省2014科技攻關(guān)項(xiàng)目(142102210078)。

    鄧璐娟(1964-),女,湖南瀏陽(yáng)人,教授,碩士研究生導(dǎo)師,主要從事軟件工程、軟件測(cè)試方向的研究。

    1671-4598(2016)09-0086-03

    10.16526/j.cnki.11-4762/tp.2016.09.024

    TP311

    A

    猜你喜歡
    函數(shù)庫(kù)關(guān)鍵字測(cè)試用例
    履職盡責(zé)求實(shí)效 真抓實(shí)干勇作為——十個(gè)關(guān)鍵字,盤(pán)點(diǎn)江蘇統(tǒng)戰(zhàn)的2021
    用于優(yōu)化雷達(dá)信號(hào)處理的VSIPL函數(shù)庫(kù)
    基于Python的開(kāi)源GIS應(yīng)用開(kāi)發(fā)
    基于SmartUnit的安全通信系統(tǒng)單元測(cè)試用例自動(dòng)生成
    Scratch求最值和平均值
    成功避開(kāi)“關(guān)鍵字”
    基于BB60C的IQ數(shù)據(jù)采集與存儲(chǔ)系統(tǒng)設(shè)計(jì)
    基于混合遺傳算法的回歸測(cè)試用例集最小化研究
    基于依賴(lài)結(jié)構(gòu)的測(cè)試用例優(yōu)先級(jí)技術(shù)
    基于用戶(hù)反饋的關(guān)系數(shù)據(jù)庫(kù)關(guān)鍵字查詢(xún)系統(tǒng)
    www日本黄色视频网| 精品电影一区二区在线| 伦理电影免费视频| www.www免费av| 精品久久久久久久毛片微露脸| 亚洲精品一区av在线观看| 成人国产综合亚洲| 天堂影院成人在线观看| 免费看十八禁软件| 亚洲久久久国产精品| 精品人妻1区二区| 午夜成年电影在线免费观看| 国产伦人伦偷精品视频| 男女做爰动态图高潮gif福利片| 女同久久另类99精品国产91| 制服人妻中文乱码| 高清毛片免费观看视频网站| 波多野结衣高清作品| 国产一区二区三区视频了| 国产aⅴ精品一区二区三区波| 午夜精品久久久久久毛片777| 久久久久久大精品| 日韩欧美一区视频在线观看| ponron亚洲| 亚洲国产精品合色在线| 国产单亲对白刺激| 俺也久久电影网| 久久人妻福利社区极品人妻图片| 国内少妇人妻偷人精品xxx网站 | 亚洲国产看品久久| 亚洲国产精品合色在线| 男女那种视频在线观看| 一本一本综合久久| 成人亚洲精品一区在线观看| 久久精品国产清高在天天线| 波多野结衣av一区二区av| 黑人巨大精品欧美一区二区mp4| 久久久久免费精品人妻一区二区 | 亚洲成av人片免费观看| 精品久久久久久,| 亚洲午夜精品一区,二区,三区| 日本一本二区三区精品| 夜夜夜夜夜久久久久| 一区二区三区精品91| 熟女少妇亚洲综合色aaa.| 黄色 视频免费看| 正在播放国产对白刺激| 久久狼人影院| 国产成人系列免费观看| 黄色丝袜av网址大全| 一进一出抽搐动态| 欧美日韩一级在线毛片| 欧美乱妇无乱码| 国产高清有码在线观看视频 | 亚洲av熟女| 精品乱码久久久久久99久播| 亚洲国产看品久久| 在线观看www视频免费| 窝窝影院91人妻| 男男h啪啪无遮挡| 亚洲中文日韩欧美视频| 成年女人毛片免费观看观看9| 色播亚洲综合网| 中文字幕高清在线视频| 中出人妻视频一区二区| 国产日本99.免费观看| 久久九九热精品免费| 免费搜索国产男女视频| videosex国产| 午夜免费观看网址| www日本黄色视频网| 久久久国产欧美日韩av| 亚洲中文字幕一区二区三区有码在线看 | 黑人操中国人逼视频| 亚洲欧洲精品一区二区精品久久久| 久久久国产成人精品二区| 午夜激情福利司机影院| 后天国语完整版免费观看| 男女视频在线观看网站免费 | 国产精品乱码一区二三区的特点| 成人一区二区视频在线观看| 国内久久婷婷六月综合欲色啪| 色av中文字幕| 日本撒尿小便嘘嘘汇集6| av福利片在线| 久9热在线精品视频| 制服诱惑二区| 亚洲黑人精品在线| 一级片免费观看大全| 亚洲av电影在线进入| 国产三级黄色录像| 天堂√8在线中文| 久久婷婷人人爽人人干人人爱| 午夜影院日韩av| 国产亚洲精品第一综合不卡| 成人特级黄色片久久久久久久| 在线十欧美十亚洲十日本专区| 可以免费在线观看a视频的电影网站| 中文字幕精品亚洲无线码一区 | 国产精品爽爽va在线观看网站 | 一a级毛片在线观看| 亚洲精品在线美女| 婷婷精品国产亚洲av| 亚洲午夜精品一区,二区,三区| 久久精品国产综合久久久| 久久久久久久久中文| 啦啦啦观看免费观看视频高清| 最新美女视频免费是黄的| 国产视频内射| 国产国语露脸激情在线看| 成人手机av| 国产午夜精品久久久久久| 久久精品国产亚洲av香蕉五月| 999久久久精品免费观看国产| 9191精品国产免费久久| 首页视频小说图片口味搜索| 1024手机看黄色片| 亚洲精品国产精品久久久不卡| 婷婷精品国产亚洲av在线| 久久婷婷成人综合色麻豆| 动漫黄色视频在线观看| 亚洲成人久久性| 久久香蕉精品热| 国产精品98久久久久久宅男小说| 天天一区二区日本电影三级| 亚洲国产精品合色在线| 黄色成人免费大全| 日本成人三级电影网站| 日韩中文字幕欧美一区二区| 国产极品粉嫩免费观看在线| 丝袜人妻中文字幕| 黄片小视频在线播放| 久久亚洲真实| 亚洲欧美精品综合久久99| 久久久久久久精品吃奶| 黑人欧美特级aaaaaa片| 亚洲精品一卡2卡三卡4卡5卡| 国产野战对白在线观看| 亚洲国产欧美一区二区综合| 啦啦啦观看免费观看视频高清| 亚洲中文字幕一区二区三区有码在线看 | 91大片在线观看| 婷婷精品国产亚洲av| 香蕉av资源在线| 久久精品成人免费网站| 亚洲在线自拍视频| 国产爱豆传媒在线观看 | 老司机午夜十八禁免费视频| 激情在线观看视频在线高清| 十八禁网站免费在线| 精品熟女少妇八av免费久了| 中文字幕精品免费在线观看视频| 免费av毛片视频| 成人手机av| 亚洲精品av麻豆狂野| 此物有八面人人有两片| 日韩av在线大香蕉| xxx96com| 色在线成人网| 十八禁人妻一区二区| 亚洲在线自拍视频| 国产成人系列免费观看| 给我免费播放毛片高清在线观看| 黑人操中国人逼视频| 欧美av亚洲av综合av国产av| 桃红色精品国产亚洲av| 9191精品国产免费久久| 国产精品久久久人人做人人爽| 一本一本综合久久| 国产成+人综合+亚洲专区| 日韩 欧美 亚洲 中文字幕| 一本久久中文字幕| 久久久久免费精品人妻一区二区 | 黄色片一级片一级黄色片| 99riav亚洲国产免费| 欧美色欧美亚洲另类二区| 国产v大片淫在线免费观看| 狂野欧美激情性xxxx| 99久久国产精品久久久| 久99久视频精品免费| 别揉我奶头~嗯~啊~动态视频| 99久久国产精品久久久| 国产日本99.免费观看| 日本 欧美在线| 日本精品一区二区三区蜜桃| 岛国视频午夜一区免费看| 一二三四社区在线视频社区8| 亚洲国产欧洲综合997久久, | 麻豆av在线久日| 国产欧美日韩精品亚洲av| 亚洲自拍偷在线| 亚洲 欧美 日韩 在线 免费| 午夜视频精品福利| 久久久久久人人人人人| 国产精品久久久久久亚洲av鲁大| 巨乳人妻的诱惑在线观看| 一进一出好大好爽视频| 国产一区二区在线av高清观看| 亚洲狠狠婷婷综合久久图片| 亚洲欧美一区二区三区黑人| 99久久无色码亚洲精品果冻| 制服诱惑二区| 国产单亲对白刺激| 精品第一国产精品| 免费看a级黄色片| 一个人观看的视频www高清免费观看 | 琪琪午夜伦伦电影理论片6080| 女人被狂操c到高潮| 麻豆成人av在线观看| 亚洲精品粉嫩美女一区| 精品久久久久久久久久久久久 | 在线观看免费日韩欧美大片| 亚洲专区字幕在线| 国产精品二区激情视频| 老司机福利观看| 精品国产亚洲在线| 久久精品国产亚洲av高清一级| 黄色丝袜av网址大全| 好男人电影高清在线观看| 国产成人精品久久二区二区91| 精品久久久久久久久久免费视频| 欧美在线黄色| 99久久国产精品久久久| 欧美三级亚洲精品| av视频在线观看入口| 黑人欧美特级aaaaaa片| 国产一区在线观看成人免费| 99在线视频只有这里精品首页| 欧美 亚洲 国产 日韩一| 宅男免费午夜| 久久精品国产99精品国产亚洲性色| 国产视频一区二区在线看| a级毛片a级免费在线| 欧洲精品卡2卡3卡4卡5卡区| 国产av在哪里看| 视频在线观看一区二区三区| 搡老熟女国产l中国老女人| 黄片小视频在线播放| 97超级碰碰碰精品色视频在线观看| 亚洲专区国产一区二区| 俄罗斯特黄特色一大片| 成人一区二区视频在线观看| 国产免费av片在线观看野外av| 久99久视频精品免费| 国产精品乱码一区二三区的特点| 成人免费观看视频高清| 日韩欧美国产在线观看| 午夜影院日韩av| 99riav亚洲国产免费| 真人做人爱边吃奶动态| 久久99热这里只有精品18| x7x7x7水蜜桃| 国产成人欧美| 1024视频免费在线观看| 免费在线观看视频国产中文字幕亚洲| 90打野战视频偷拍视频| 精品一区二区三区av网在线观看| 日本 av在线| 精品一区二区三区四区五区乱码| 不卡一级毛片| 免费看十八禁软件| 老熟妇乱子伦视频在线观看| av在线天堂中文字幕| 黄色丝袜av网址大全| 色在线成人网| 99久久精品国产亚洲精品| 精品国产亚洲在线| 丝袜人妻中文字幕| 国产精品1区2区在线观看.| 日韩视频一区二区在线观看| 成人欧美大片| 宅男免费午夜| 黄色丝袜av网址大全| 国产精品久久久久久亚洲av鲁大| 中文字幕另类日韩欧美亚洲嫩草| 国产私拍福利视频在线观看| 99热只有精品国产| 免费看十八禁软件| 窝窝影院91人妻| 97人妻精品一区二区三区麻豆 | 成人18禁高潮啪啪吃奶动态图| 嫩草影视91久久| 最近最新免费中文字幕在线| 麻豆一二三区av精品| 亚洲真实伦在线观看| 天天添夜夜摸| 久久草成人影院| 99国产精品一区二区三区| 午夜免费观看网址| 国产成人影院久久av| 国产高清videossex| 黑人巨大精品欧美一区二区mp4| 宅男免费午夜| 男人的好看免费观看在线视频 | 99久久99久久久精品蜜桃| 国产三级在线视频| 中文字幕另类日韩欧美亚洲嫩草| 中出人妻视频一区二区| 777久久人妻少妇嫩草av网站| 草草在线视频免费看| 午夜福利在线观看吧| 久久久久久久久免费视频了| 午夜视频精品福利| 久久人妻福利社区极品人妻图片| 亚洲天堂国产精品一区在线| 免费av毛片视频| 欧美日韩亚洲国产一区二区在线观看| av在线天堂中文字幕| 久久 成人 亚洲| 男女做爰动态图高潮gif福利片| 亚洲欧美激情综合另类| 99久久久亚洲精品蜜臀av| a级毛片在线看网站| 99久久99久久久精品蜜桃| 在线免费观看的www视频| 欧美丝袜亚洲另类 | 免费人成视频x8x8入口观看| 在线观看舔阴道视频| 亚洲,欧美精品.| 成年女人毛片免费观看观看9| 变态另类成人亚洲欧美熟女| 日本a在线网址| 日日摸夜夜添夜夜添小说| 久久精品国产亚洲av香蕉五月| 精品一区二区三区四区五区乱码| 国产高清视频在线播放一区| 成年人黄色毛片网站| 亚洲一区中文字幕在线| 少妇裸体淫交视频免费看高清 | 国产精品久久电影中文字幕| 一边摸一边做爽爽视频免费| 最新美女视频免费是黄的| 啦啦啦观看免费观看视频高清| 成人国产一区最新在线观看| 午夜福利在线观看吧| 午夜日韩欧美国产| 久久99热这里只有精品18| 中文字幕精品亚洲无线码一区 | 国产黄片美女视频| 中文亚洲av片在线观看爽| 午夜免费成人在线视频| 天堂动漫精品| 在线观看免费日韩欧美大片| 国内久久婷婷六月综合欲色啪| 日本成人三级电影网站| 日韩欧美一区二区三区在线观看| 18美女黄网站色大片免费观看| 亚洲欧洲精品一区二区精品久久久| 妹子高潮喷水视频| 国产精品一区二区三区四区久久 | www.熟女人妻精品国产| 中文亚洲av片在线观看爽| 国产欧美日韩精品亚洲av| 亚洲人成伊人成综合网2020| 色综合婷婷激情| 国产真人三级小视频在线观看| 亚洲七黄色美女视频| 国产av一区在线观看免费| 久久久久久免费高清国产稀缺| 亚洲精品粉嫩美女一区| 亚洲全国av大片| 国产亚洲欧美在线一区二区| 欧美色视频一区免费| 国产激情偷乱视频一区二区| 国内少妇人妻偷人精品xxx网站 | av视频在线观看入口| 久久人妻av系列| 身体一侧抽搐| 亚洲性夜色夜夜综合| 午夜成年电影在线免费观看| 757午夜福利合集在线观看| 久久伊人香网站| 国产乱人伦免费视频| 久久中文看片网| 久久香蕉激情| 女性被躁到高潮视频| 黄片小视频在线播放| 99久久精品国产亚洲精品| 国产精品1区2区在线观看.| www.999成人在线观看| 夜夜夜夜夜久久久久| 亚洲va日本ⅴa欧美va伊人久久| 国产蜜桃级精品一区二区三区| 欧美乱妇无乱码| 99精品在免费线老司机午夜| 午夜福利欧美成人| 老鸭窝网址在线观看| 亚洲天堂国产精品一区在线| 国产av在哪里看| 免费搜索国产男女视频| 亚洲在线自拍视频| 色哟哟哟哟哟哟| 少妇裸体淫交视频免费看高清 | 国产免费av片在线观看野外av| 亚洲人成伊人成综合网2020| 久久香蕉精品热| 制服丝袜大香蕉在线| 怎么达到女性高潮| 亚洲欧美日韩无卡精品| 欧美日韩福利视频一区二区| 亚洲午夜精品一区,二区,三区| 宅男免费午夜| 最新在线观看一区二区三区| 国产精品99久久99久久久不卡| 午夜福利欧美成人| 搡老岳熟女国产| 国产亚洲av嫩草精品影院| 一级毛片精品| 免费电影在线观看免费观看| 欧美中文日本在线观看视频| 日韩欧美在线二视频| 国产精品综合久久久久久久免费| 久久久久久久精品吃奶| 亚洲精品av麻豆狂野| 香蕉av资源在线| 久久久国产成人精品二区| 亚洲成人久久性| 一边摸一边抽搐一进一小说| 精品国产乱子伦一区二区三区| 亚洲片人在线观看| 精品一区二区三区四区五区乱码| 欧美三级亚洲精品| 欧美在线一区亚洲| 亚洲av片天天在线观看| 深夜精品福利| 99热这里只有精品一区 | av视频在线观看入口| 久久热在线av| 两个人看的免费小视频| 久久精品91蜜桃| 国产亚洲精品久久久久5区| svipshipincom国产片| 男人舔奶头视频| 69av精品久久久久久| 窝窝影院91人妻| 欧美激情 高清一区二区三区| 人妻久久中文字幕网| 男人舔女人的私密视频| 亚洲avbb在线观看| 亚洲中文字幕日韩| 听说在线观看完整版免费高清| 久久热在线av| 久久精品夜夜夜夜夜久久蜜豆 | 国产午夜精品久久久久久| 国产aⅴ精品一区二区三区波| 中文字幕人成人乱码亚洲影| 亚洲人成伊人成综合网2020| 婷婷亚洲欧美| 黄色视频,在线免费观看| 两个人看的免费小视频| 久久精品aⅴ一区二区三区四区| 女人被狂操c到高潮| 午夜福利在线在线| 亚洲精华国产精华精| 国产熟女xx| 亚洲人成77777在线视频| 亚洲在线自拍视频| 在线永久观看黄色视频| 午夜精品久久久久久毛片777| 国产精品免费视频内射| 日日干狠狠操夜夜爽| 一级毛片高清免费大全| 日韩欧美三级三区| 亚洲国产精品久久男人天堂| 午夜福利欧美成人| 三级毛片av免费| 大型黄色视频在线免费观看| 国产av又大| 久久久久久免费高清国产稀缺| 最近最新免费中文字幕在线| 岛国在线观看网站| 嫩草影院精品99| 男男h啪啪无遮挡| 哪里可以看免费的av片| 国产又黄又爽又无遮挡在线| 男人舔女人下体高潮全视频| www国产在线视频色| av中文乱码字幕在线| 国产成人av教育| 999久久久国产精品视频| 麻豆成人午夜福利视频| 亚洲成人免费电影在线观看| 99riav亚洲国产免费| 亚洲人成网站在线播放欧美日韩| 免费人成视频x8x8入口观看| 色婷婷久久久亚洲欧美| 欧美日韩亚洲综合一区二区三区_| 成人欧美大片| 长腿黑丝高跟| 正在播放国产对白刺激| 久久亚洲精品不卡| 国产精品 欧美亚洲| 男女下面进入的视频免费午夜 | 久久精品国产综合久久久| 美女高潮到喷水免费观看| 日日摸夜夜添夜夜添小说| 国产欧美日韩精品亚洲av| 亚洲欧洲精品一区二区精品久久久| 久久精品夜夜夜夜夜久久蜜豆 | 中文字幕人成人乱码亚洲影| 国产亚洲欧美在线一区二区| 日本在线视频免费播放| 欧美亚洲日本最大视频资源| 黄片大片在线免费观看| 亚洲精品一卡2卡三卡4卡5卡| 国产精品av久久久久免费| 国内精品久久久久精免费| 午夜a级毛片| 国产aⅴ精品一区二区三区波| 欧美黑人欧美精品刺激| 可以在线观看毛片的网站| 亚洲精品美女久久久久99蜜臀| 亚洲avbb在线观看| 国产在线观看jvid| √禁漫天堂资源中文www| 两个人免费观看高清视频| 91麻豆av在线| 国产男靠女视频免费网站| 欧美日韩一级在线毛片| 麻豆成人av在线观看| 99riav亚洲国产免费| 日韩中文字幕欧美一区二区| 日韩大码丰满熟妇| 亚洲中文字幕日韩| 午夜福利视频1000在线观看| 国产亚洲av高清不卡| 国产成人影院久久av| 精品少妇一区二区三区视频日本电影| 亚洲五月天丁香| 在线观看免费视频日本深夜| 大香蕉久久成人网| 日本黄色视频三级网站网址| 嫁个100分男人电影在线观看| 中文亚洲av片在线观看爽| 久久午夜亚洲精品久久| 一区二区三区高清视频在线| 国产国语露脸激情在线看| 亚洲专区中文字幕在线| 国产精品美女特级片免费视频播放器 | 在线永久观看黄色视频| 久久中文字幕一级| 成人18禁在线播放| 日韩欧美一区视频在线观看| 日本三级黄在线观看| 欧美在线黄色| 法律面前人人平等表现在哪些方面| 1024香蕉在线观看| 日本一本二区三区精品| 男女做爰动态图高潮gif福利片| 久久人妻av系列| 亚洲国产欧洲综合997久久, | 午夜视频精品福利| av福利片在线| 精品电影一区二区在线| 人人妻人人澡人人看| 欧美日韩瑟瑟在线播放| 日韩精品免费视频一区二区三区| 精品久久久久久成人av| 国产欧美日韩一区二区三| 久久人妻av系列| 19禁男女啪啪无遮挡网站| 久久精品国产综合久久久| 18禁美女被吸乳视频| 成人国产综合亚洲| 又大又爽又粗| 身体一侧抽搐| 午夜老司机福利片| 久久久国产欧美日韩av| 亚洲av电影不卡..在线观看| 色综合亚洲欧美另类图片| 日本一本二区三区精品| 琪琪午夜伦伦电影理论片6080| 美国免费a级毛片| 免费人成视频x8x8入口观看| 黑人巨大精品欧美一区二区mp4| 男人的好看免费观看在线视频 | 亚洲中文字幕一区二区三区有码在线看 | 欧美国产精品va在线观看不卡| av视频在线观看入口| 不卡av一区二区三区| 一级片免费观看大全| 黄网站色视频无遮挡免费观看| 真人一进一出gif抽搐免费| 久久欧美精品欧美久久欧美| 中出人妻视频一区二区| 国产欧美日韩一区二区三| 窝窝影院91人妻| 极品教师在线免费播放| 国产伦在线观看视频一区| 性色av乱码一区二区三区2| 国产精品一区二区精品视频观看| 一本一本综合久久| 香蕉国产在线看| 一区二区三区高清视频在线| 桃色一区二区三区在线观看| 99re在线观看精品视频| 国产av一区在线观看免费| 十八禁网站免费在线| 久久精品国产综合久久久| 99国产精品一区二区蜜桃av| 久久国产精品影院| 99精品久久久久人妻精品| 亚洲国产精品999在线| 午夜久久久在线观看| 美女高潮喷水抽搐中文字幕| 91在线观看av| 中国美女看黄片| 日韩免费av在线播放| 老司机午夜福利在线观看视频| 久久精品国产亚洲av香蕉五月| 一级毛片女人18水好多| 成在线人永久免费视频| 国产精品99久久99久久久不卡| 亚洲成av人片免费观看| 人人妻人人澡欧美一区二区|