• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于函數(shù)調(diào)用路徑的測試用例優(yōu)先級排序

    2014-09-29 10:32:12牟永敏李慧麗
    計(jì)算機(jī)工程 2014年7期
    關(guān)鍵詞:函數(shù)調(diào)用測試用例排序

    牟永敏,李慧麗

    (北京信息科技大學(xué)計(jì)算機(jī)學(xué)院,北京 100101)

    1 概述

    軟件的調(diào)試、升級與維護(hù)往往需要更改部分代碼,為了驗(yàn)證修改后的程序是否引發(fā)新的問題或?qū)ξ葱薷牡牟糠衷斐捎绊?,就需要頻繁地對軟件進(jìn)行回歸測試[1]。

    回歸測試中最簡單的方法就是全部重測,但是實(shí)際情況是更改的代碼往往只是系統(tǒng)中很小的一部分,對整個(gè)系統(tǒng)的重測會耗費(fèi)大量的時(shí)間,造成人力和物力的浪費(fèi),因此實(shí)際工作中一般采用選擇性回歸測試方法[2-3]。選擇性回歸測試是當(dāng)源代碼修改后,僅對那些跟源代碼變化相關(guān)的模塊進(jìn)行測試。

    測試用例的選擇、測試用例集約簡以及測試用例優(yōu)先級排序等技術(shù)是回歸測試研究的關(guān)鍵問題。其中,測試用例優(yōu)先級技術(shù)認(rèn)為不同測試用例對于測試目標(biāo)的完成有著不同的貢獻(xiàn)程度,為了能夠更快地達(dá)成測試目標(biāo),有必要將不同的測試用例進(jìn)行比較和排序,然后優(yōu)先執(zhí)行相對重要的測試用例[4]。目前測試用例優(yōu)先級排序技術(shù)可分為覆蓋率技術(shù)和非覆蓋率技術(shù)[5]。

    基于覆蓋的測試用例優(yōu)先級技術(shù)根據(jù)測試用例的歷史覆蓋信息,設(shè)計(jì)優(yōu)先級排序方法,但其考慮的優(yōu)先級影響因素過于單一。為此,本文提出一種基于函數(shù)調(diào)用路徑的測試用例集優(yōu)化方法。以函數(shù)調(diào)用路徑覆蓋分析為基礎(chǔ),分析函數(shù)調(diào)用路徑中影響測試用例優(yōu)先級的因素,設(shè)計(jì)測試用例優(yōu)先集量化方法,并且根據(jù)測試執(zhí)行情況動態(tài)調(diào)整優(yōu)先級,以進(jìn)一步優(yōu)化優(yōu)先級排序。

    2 基本概念

    2.1 基于函數(shù)調(diào)用路徑的覆蓋分析

    路徑覆蓋測試是一種針對白盒測試的常用充分性準(zhǔn)則,它觀察程序運(yùn)行的整個(gè)路徑[6]。但是即使是規(guī)模很小的程序,包含的邏輯路徑數(shù)量也是相當(dāng)大的,而在大型程序中進(jìn)行完全的路徑測試幾乎是不可能的[7-8]。基于函數(shù)調(diào)用路徑的覆蓋分析技術(shù)是在保證每個(gè)函數(shù)完成單元測試的前提下,將覆蓋分析粒度由語句級擴(kuò)展到函數(shù)級,分析函數(shù)調(diào)用的控制邏輯關(guān)系,這樣既能避免路徑的爆炸式增長,又可以保證測試的充分性。

    RegressiontestC1.0[9]是自主開發(fā)的基于函數(shù)調(diào)用路徑的覆蓋分析工具,利用該工具可以得到全局靜態(tài)路徑集和測試用例執(zhí)行對應(yīng)的動態(tài)路徑。其整體思路是:通過對軟件源代碼的靜態(tài)分析,繪制帶有控制邏輯的函數(shù)調(diào)用關(guān)系圖,給出所有可能的函數(shù)調(diào)用路徑,稱為全局靜態(tài)路徑集[10];對函數(shù)首尾和控制邏輯關(guān)鍵字進(jìn)行插裝預(yù)處理,輸入測試用例,執(zhí)行預(yù)處理后的程序,根據(jù)裝點(diǎn)信息得到該測試用例對應(yīng)的動態(tài)函數(shù)調(diào)用路徑,下面給出相關(guān)的定義。

    定義1函數(shù)調(diào)用路徑是指根據(jù)函數(shù)調(diào)用關(guān)系得到的由程序入口點(diǎn)到出口點(diǎn)的一個(gè)函數(shù)名序列,表示為Pi={Vi0,Vi1,…,Vim},Vij為函數(shù)名;Vij和Vij+1的相鄰關(guān)系表示Vij調(diào)用了Vij+1。

    定義2靜態(tài)路徑是指對源代碼進(jìn)行靜態(tài)分析,根據(jù)函數(shù)調(diào)用關(guān)系得到函數(shù)調(diào)用路徑。全局靜態(tài)路徑集是全部靜態(tài)路徑的集合,表示為B(S,C)={P1,P2,…,Pn},其中,S是源代碼;C是函數(shù)調(diào)用關(guān)系準(zhǔn)則;Pi是函數(shù)調(diào)用路徑。

    定義3動態(tài)路徑是指輸入測試數(shù)據(jù)后,程序動態(tài)執(zhí)行時(shí)實(shí)際執(zhí)行的函數(shù)調(diào)用路徑,表示為L(S,ti)={P1,P2,…},

    其中,S是指插裝后的源代碼;ti指測試用例。

    例如,若源代碼為:

    其中包含函數(shù):main,scanf,add,f2,multi。根據(jù)函數(shù)調(diào)用關(guān)系,得到4條函數(shù)調(diào)用路徑形如P1={main,scanf},P2={main,scanf,add},P3={main,scanf,f2},P4={main,scanf,multi}。此程序的全局靜態(tài)路徑集S={P1,P2,P3,P4}。當(dāng)輸入測試數(shù)據(jù)a=2時(shí),程序執(zhí)行對應(yīng)的動態(tài)路徑為P3和P4,如圖1所示。

    圖1 函數(shù)調(diào)用路徑

    基于函數(shù)調(diào)用路徑的回歸測試用例集確定的基本思想是:對新舊版本源程序進(jìn)行比較,采集函數(shù)變更點(diǎn)數(shù)據(jù),函數(shù)變更點(diǎn)是指產(chǎn)生了變更的函數(shù)。在全局靜態(tài)路徑集中標(biāo)出所有經(jīng)過變更點(diǎn)的路徑,稱為變更路徑集[11]。回歸測試時(shí)覆蓋全部變更路徑集,既能測試變更模塊,也能保證受變更模塊影響的相關(guān)模塊的正確性。因此,變更路徑集即回歸測試的測試需求,每一條變更路徑即一條測試需求。覆蓋變更路徑集中的一條或多條路徑的測試用例即回歸測試用例集。

    例如上例中的函數(shù)minus和multi發(fā)生了變更,minus和multi即變更函數(shù)。路徑P3和P4即變更路徑集。P3和P4分別對應(yīng)測試需求2個(gè)測試需求。若有如表1所示的測試用例-函數(shù)調(diào)用路徑關(guān)系,則回歸測試用例集為t3,t4,t5,t6。其中,×表示測試用例ti覆蓋函數(shù)調(diào)用路徑Pj。

    表1 測試用例-函數(shù)調(diào)用路徑關(guān)系

    2.2 測試用例優(yōu)先級技術(shù)

    測試用例優(yōu)先級技術(shù)認(rèn)為不同測試用例對于測試目標(biāo)的完成有不同的貢獻(xiàn)程度,在回歸測試時(shí)將測試用例按其重要程度進(jìn)行優(yōu)先級排序后使用,能更快地達(dá)成測試目標(biāo)。

    例如,某被測程序中測試用例的缺陷檢測情況如表2所示。其中,×表示測試用例Ti檢測出錯(cuò)誤Fj。如果按照T1-T10的順序執(zhí)行測試用例,顯然直到執(zhí)行到T3才會檢測出錯(cuò)誤,且只有所有測試用例全部被執(zhí)行才能檢測出所有的錯(cuò)誤。顯然T4,T7,T9,T10可以檢測出全部的錯(cuò)誤,如果按照T3-T4-T7-T9-T10-T1-T2-T5-T6-T8的順序執(zhí)行,測試用例能夠更早地檢測到程序的錯(cuò)誤。

    表2 測試用例缺陷檢測情況

    但是在測試用例被執(zhí)行前,測試用例所檢測出的錯(cuò)誤是無法預(yù)知的,研究發(fā)現(xiàn)依據(jù)一定的覆蓋準(zhǔn)則和測試用例執(zhí)行的歷史信息,盡快達(dá)到覆蓋標(biāo)準(zhǔn)能提高測試用例的檢錯(cuò)率。測試用例優(yōu)先級技術(shù)就是依據(jù)測試的歷史信息,以代碼覆蓋率或檢錯(cuò)效率等為標(biāo)準(zhǔn),為每個(gè)待復(fù)用的測試用例賦予一個(gè)優(yōu)先級,并在回歸測試過程中按優(yōu)先級順序選取和執(zhí)行這些測試用例。

    測試用例優(yōu)先級技術(shù)的核心問題是如何確定和表述測試用例的重要程度[12],目前主要是根據(jù)測試用例歷史覆蓋率排序測試用例優(yōu)先級,即優(yōu)先運(yùn)行覆蓋能力較強(qiáng)的測試用例。但是傳統(tǒng)的優(yōu)先級排序方法方法都只選取代碼覆蓋信息作為測試用例的特征加以度量,而忽略了其他影響測試用例優(yōu)先級的因素,且缺乏動態(tài)性。

    3 優(yōu)先級排序算法

    3.1 測試用例優(yōu)先級量化方法

    基于函數(shù)調(diào)用路徑的測試用例優(yōu)先級排序方法以測試用例對函數(shù)調(diào)用路徑的歷史覆蓋信息作為優(yōu)先級的一個(gè)影響因子,在此基礎(chǔ)上分析函數(shù)調(diào)用路徑與檢錯(cuò)結(jié)果的關(guān)系,提取單元測試時(shí)函數(shù)中檢測出缺陷的個(gè)數(shù)和函數(shù)的扇入系數(shù)2個(gè)特征作為優(yōu)先級的影響因子對優(yōu)先級進(jìn)行排序。

    為了便于描述,給出以下相關(guān)定義:

    定義4(測試覆蓋矩陣)測試用例集 T={t1,t2,…,tn},變更路徑集,即測試需求集 P={P1,P2,…,Pm},則測試覆蓋矩陣tCM是一個(gè)m×n階矩陣,當(dāng)ti在執(zhí)行過程中執(zhí)行到了函數(shù)調(diào)用路徑路徑Pj時(shí),元素δij=1,否則δij=0。

    定義5(測試用例的覆蓋路徑集)測試用例ti的覆蓋路徑集 P(ti)(P(ti)∈P)是一個(gè)函數(shù)調(diào)用路徑集,其中包含執(zhí)行測試用例ti時(shí)所執(zhí)行到的所有P中的函數(shù)調(diào)用路徑。

    定義6(函數(shù)調(diào)用路徑的執(zhí)行用例集)Pj的執(zhí)行用例集t(Pj)(t(Pj)∈T)是一個(gè)測試用例集,為測試用例集T中所有能夠覆蓋路徑Pj的測試用例。

    (1)測試用例函數(shù)調(diào)用路徑覆蓋能力影響因子

    測試用例ti函數(shù)調(diào)用路徑覆蓋能力是指,測試用例ti的覆蓋路徑集 P(ti)中的路徑條數(shù) |P(ti)|。在回歸測試過程中,挑選覆蓋能力強(qiáng)的測試用例優(yōu)先執(zhí)行,能盡快達(dá)到覆蓋標(biāo)準(zhǔn),滿足測試覆蓋需求。因此,將測試用例函數(shù)調(diào)用路徑覆蓋能力應(yīng)用于優(yōu)先級排序中,使覆蓋能力強(qiáng)的測試用例有較高的優(yōu)先級,保證其更早地被執(zhí)行以有效提高測試效率。用下式量化計(jì)算第i個(gè)測試用例ti的函數(shù)調(diào)用路徑覆蓋能力對優(yōu)先級的影響值

    其中,Ni為測試用例ti執(zhí)行到的路徑條數(shù) |P(ti)|,即測試用例ti的函數(shù)調(diào)用路徑覆蓋能力;max{N}為所有測試用例中函數(shù)調(diào)用路徑覆蓋能力的最大值。式(1)將測試用例函數(shù)調(diào)用路徑覆蓋能力影響值量化至0~1的數(shù)值區(qū)間。

    (2)測試用例覆蓋路徑檢錯(cuò)指標(biāo)影響因子

    軟件測試的二八原則指出,軟件中約20%的系統(tǒng)模塊包含了約80%的軟件缺陷。因此,單元測試時(shí)檢測出錯(cuò)誤較多的模塊應(yīng)作為重點(diǎn)測試的模塊。模塊的扇入系數(shù)是指,直接調(diào)用該模塊的上級模塊的個(gè)數(shù)。測試經(jīng)驗(yàn)表明,一個(gè)模塊出現(xiàn)錯(cuò)誤很可能會引起調(diào)用該模塊的其他模塊出錯(cuò),高扇入的模塊會引起這種錯(cuò)誤的迅速擴(kuò)散。在C語言中單元測試的一個(gè)模塊通常是指一個(gè)函數(shù)。因此,本文將單元測試時(shí)函數(shù)中檢測出錯(cuò)誤的個(gè)數(shù)和函數(shù)的扇入系數(shù)應(yīng)用于優(yōu)先級排序中。用式(2)、式(3)量化其對第i個(gè)測試用例ti優(yōu)先級的影響值

    1)函數(shù)調(diào)用路徑檢錯(cuò)指標(biāo)

    若已知函數(shù)調(diào)用路徑 Pk={Vk0,Vk1,…,Vkm),則路徑Pk的函數(shù)調(diào)用路徑檢錯(cuò)指標(biāo)量化值為:

    其中,Vkl∈Pk,且在回歸測試的單元測試階段函數(shù)Vkj中至少檢測出一處錯(cuò)誤;Ekj為單元測試時(shí)函數(shù)Vkj中所檢測出的錯(cuò)誤個(gè)數(shù);max{E}指在回歸測試的單元測試階段所有被測函數(shù)中檢測出的錯(cuò)誤個(gè)數(shù)最大值;CVkj為函數(shù)vkj的扇入值;max{CV}是指在回歸測試的單元測試階段,所有至少檢測出一處錯(cuò)誤的函數(shù)中函數(shù)扇入值的最大值。式(2)將函數(shù)調(diào)用路徑檢錯(cuò)指標(biāo)量化至0~1的數(shù)值區(qū)間,使得錯(cuò)誤個(gè)數(shù)多、扇入系數(shù)高的函數(shù)所在的函數(shù)調(diào)用路徑有更高的量化值。

    2)測試用例的覆蓋路徑檢錯(cuò)指標(biāo)

    測試用例ti的覆蓋路徑檢錯(cuò)指標(biāo)是指測試用例ti的覆蓋路徑集中所有元素的函數(shù)調(diào)用路徑檢錯(cuò)指標(biāo)平均值:

    其中,n為ti覆蓋路徑集中的元素個(gè)數(shù)。式(2)、式(3)使檢測出錯(cuò)誤概率較高的測試用例有更高的優(yōu)先級量化值,保證盡早地檢測出盡量多的錯(cuò)誤。

    (3)測試用例優(yōu)先級量化取值

    綜合測試用例函數(shù)調(diào)用路徑覆蓋能力和測試用例覆蓋路徑檢錯(cuò)指標(biāo),第i個(gè)測試用例ti的優(yōu)先級取值Vi為:

    3.2 測試用例優(yōu)先級優(yōu)化算法

    測試用例的執(zhí)行將不斷地覆蓋函數(shù)調(diào)用路徑,因此,在測試執(zhí)行過程中變更路徑集可以分為2個(gè)部分,尚未被任何執(zhí)行過的測試用例覆蓋的未覆蓋路徑集testRt_UC,以及已經(jīng)至少被一個(gè)執(zhí)行過的測試用例覆蓋的覆蓋路徑集testRt_C。如果每次選擇的測試用例tj使tj盡可能多地滿足未覆蓋路徑集,而不關(guān)注其對覆蓋路徑集的覆蓋情況,則這種測試用例優(yōu)先級選擇方法將能更快速地覆蓋所有的變更路徑集。因此,本文在測試用例執(zhí)行過程中,根據(jù)測試用例對變更路徑集的覆蓋情況動態(tài)調(diào)整測試用例函數(shù)調(diào)用路徑覆蓋能力:,其中,為動態(tài)函數(shù)調(diào)用路徑覆蓋能力取值;為|P(ti)∩ testRt_ UC|,即測試用例ti執(zhí)行到的尚未被任何已執(zhí)行過的測試用例覆蓋的函數(shù)調(diào)用路徑條數(shù)。

    測試用例優(yōu)先級優(yōu)化算法在測試用例執(zhí)行過程中,根據(jù)覆蓋覆蓋路徑集和未覆蓋路徑集的變化,計(jì)算動態(tài)函數(shù)調(diào)用路徑覆蓋能力取值,從而動態(tài)調(diào)整測試用例優(yōu)先集量化值,使優(yōu)先級排序方法盡快覆蓋所有測試需求(函數(shù)調(diào)用路徑),算法描述如下:

    輸入 T為回歸測試用例集;P為變更路徑集;tCM為測試覆蓋矩陣

    輸出 排序后的測試用例集T’

    變量 testRt_UC為未覆蓋路徑集;testC_UR為未執(zhí)行測試用例集

    Begin

    /*初始化*/

    sort(T);//根據(jù)測試用例優(yōu)先級量化值對T中測試用例排序testRt_UC=P;testC_UR=T;

    /*測試用例集優(yōu)化排序*/

    while(testC_UR≠φ)

    run(t1);//執(zhí)行測試用例testC_UR中排序第一的測試用例,//即尚未執(zhí)行的測試用例中優(yōu)先級取值最高的測試用例

    testC_UR=testC_UR–t1;

    if(testRt_UC≠φ)

    if(P(t1)∩ testRt_UC≠φ)

    /*遍歷測試用例t1的覆蓋路徑集,實(shí)現(xiàn)優(yōu)先級的動態(tài)調(diào)整*/

    for each(Pj∈(P(t1) ∩ testRt_UC))

    /*動態(tài)調(diào)整Pj的執(zhí)行用例集t(Pj)中所有測試用例的優(yōu)先級量化值*/

    for each(tk∈t(Pj))

    modify(Vk);//動態(tài)調(diào)整測試用例tk的優(yōu)先級量化值

    end for;end for;

    sort(testC_UR);

    end if;

    else

    /*若未覆蓋路徑集為空,則按優(yōu)先級取值依次執(zhí)行所有測

    試用例*/

    for each(ti∈testC_UR)

    run(ti);end for;

    testC_UR=φ

    end if;

    testRt_UC=testRt_UC-P(t1);end while;

    在最外層的while循環(huán)中,首先執(zhí)行當(dāng)前測試用例優(yōu)先級取值最高的測試用例t1,并在未執(zhí)行測試用例集testC_UR移除該測試用例。若未覆蓋路徑集為空,則說明所有變更路徑都已經(jīng)至少被覆蓋一次,此時(shí)未覆蓋路徑集不會再發(fā)生變化,測試用例的優(yōu)先級取值也就不會再發(fā)生變化,因此按優(yōu)先級取值依次執(zhí)行所有測試用例;若未覆蓋路徑集非空,則遍歷測試用例t1的覆蓋路徑集P(t1)與未覆蓋路徑集testRT_UC的交集,動態(tài)地調(diào)整每條路徑的執(zhí)行用例集中的測試用例優(yōu)先級取值。最后在未覆蓋路徑集中testRt_UC移除測試用例t1覆蓋路徑集P(t1)。循環(huán)執(zhí)行整個(gè)過程,直至所有測試用例都被執(zhí)行。

    4 實(shí)驗(yàn)與評測

    4.1 優(yōu)先級排序方法度量標(biāo)準(zhǔn)

    測試用例優(yōu)先級排序方法的目標(biāo)是為了提高測試的缺陷檢測率,盡早發(fā)現(xiàn)程序中的錯(cuò)誤。文獻(xiàn)[12]提出了APFD度量標(biāo)準(zhǔn)作為優(yōu)先級排序方法的度量指標(biāo)。

    APFD即缺陷檢測加權(quán)平均百分比,若測試用例集T包含n個(gè)測試用例,該測試用例集能夠檢測出的錯(cuò)誤集合F中包含m個(gè)錯(cuò)誤,則測試用例集T的一個(gè)順序集T′的APFD值定義為:

    其中,T1F為順序集T′中第一個(gè)檢測出錯(cuò)誤i的測試用例在T中的位置。

    APFD的取值范圍是0~1。APFD的值越高,表示對應(yīng)測試用例順序集缺陷檢測率越高。

    例如測試用例缺陷檢測情況如表2所示,若按照T1-T10順序執(zhí)行測試用例,則該順序集的APFD值為:

    若按照T1-T10-T3-T4-T7-T9-T10-T1-T2-T5-T6-T8的順序執(zhí)行,則該順序集的APFD值為:

    4.2 實(shí)驗(yàn)結(jié)果

    基于函數(shù)調(diào)用路徑的測試核心關(guān)注點(diǎn)是程序的規(guī)模,函數(shù)調(diào)用路徑的條數(shù)等信息,因此選取了代碼行數(shù)幾十行到幾百行、函數(shù)調(diào)用路徑條數(shù)為數(shù)十條到上百條的5個(gè)實(shí)用C語言程序作為被測程序進(jìn)行對比實(shí)驗(yàn)。

    針對每一個(gè)被測程序執(zhí)行3輪測試。第一輪執(zhí)行未排序的測試用例集,第二輪執(zhí)行僅使用優(yōu)先級量化方法排序的測試用例集,第三輪執(zhí)行使用測試用例優(yōu)先級優(yōu)化方法排序的測試用例集。被測程序的代碼行數(shù)、函數(shù)調(diào)用路徑條數(shù)、測試用例數(shù)、缺陷數(shù)以及3輪順序集對應(yīng)的APFD值如表3所示。

    表3 優(yōu)先級排序算法的實(shí)驗(yàn)數(shù)據(jù)

    通過實(shí)驗(yàn)分析發(fā)現(xiàn):

    (1)使用優(yōu)先級量化方法排序后的測試用例順序集APFD值要高于未使用任何排序方法的測試用例順序集APFD值,且兩者差值較大,說明優(yōu)先級量化方法能明顯提高測試的缺陷檢測率。

    (2)使用測試用例優(yōu)先級優(yōu)化方法動態(tài)排序后的測試用例順序集APFD值要高于僅使用優(yōu)先級量化方法排序的順序集APFD值,但是提升幅度不明顯,一般能提高幾個(gè)百分點(diǎn)。在測試用例數(shù)和缺陷數(shù)較少的情況下,該優(yōu)化方法可能失效。例如被測程P1,第三輪APFD值和第二輪APFD值無差別。因?yàn)閮?yōu)化方法本身會有資源和時(shí)間的開銷,在實(shí)際測試工程中要綜合考慮軟件規(guī)模、測試開銷等問題決定是否選用優(yōu)化方法。

    (3)隨著軟件規(guī)模的增加,測試用例優(yōu)先級量化方法和測試用例優(yōu)先級優(yōu)化方法對缺陷檢測率的提升都更加穩(wěn)定。

    5 結(jié)束語

    傳統(tǒng)的基于覆蓋的優(yōu)先級技術(shù)僅考慮代碼覆蓋信息,而忽略了其他優(yōu)先級影響因素。本文采用基于函數(shù)調(diào)用路徑的測試用例優(yōu)先級排序方法,將測試用例的歷史覆蓋信息和其他優(yōu)先級影響因素應(yīng)用于優(yōu)先級量化排序。按照此方法排序測試用例,能盡快地檢測到程序中的缺陷,使系統(tǒng)的調(diào)試修改工作盡早進(jìn)行,降低風(fēng)險(xiǎn)。而根據(jù)測試執(zhí)行動態(tài)調(diào)整優(yōu)先級的優(yōu)化方法,在測試用例數(shù)和缺陷數(shù)較多的測試中能進(jìn)一步提高缺陷檢測速度。

    隨著軟件規(guī)模的不斷擴(kuò)大,軟件系統(tǒng)的迭代開發(fā)導(dǎo)致測試用例不斷被設(shè)計(jì)、修改和執(zhí)行,其組成的測試用例集規(guī)模將更加龐大。如何尋找影響測試用例優(yōu)先級的各種因素,并綜合各種因素制定合理的優(yōu)先級計(jì)算方法,進(jìn)一步提高測試效率,并保證算法的成本開銷是優(yōu)先級研究的方向之一。

    [1]郭晶晶,高建華.基于冗余測試用例的最小測試用例集生成方法[J].計(jì)算機(jī)工程,2010,36(1):45-48.

    [2]彭園園.回歸測試方法及測試用例優(yōu)化研究[D].武漢:武漢理工大學(xué),2009.

    [3]Mu Yongmin,Zheng Yuhui,Zhang Zhihua,et al.The Algorithm of Infeasible Paths Extraction Oriented the Function Calling Relationship[J]. Chinese Journal of Electronics,2012,21(2):236-240.

    [4]屈 波,聶長海,徐寶文.基于測試用例設(shè)計(jì)信息的回歸測試優(yōu)先級算法[J].計(jì)算機(jī)學(xué)報(bào),2008,31(3):431-439.

    [5]屈 波,聶長海,徐寶文.回歸測試中測試用例優(yōu)先級技術(shù)研究綜述[J].計(jì)算機(jī)科學(xué)與探索,2009,3(3):225-233.

    [6]Mu Yongmin,Wang Rui,Zhang Zhihua,et al.Automatic Test Method Research on the Word Part of Document Format Translator[J].Chinese Journal of Electronics,2013,22(1):55-60.

    [7]侯 蕓,顧 剛,高海昌,等.一種路徑覆蓋自動生成的改進(jìn)方法[J].計(jì)算機(jī)工程,2007,33(4):67-69.

    [8]杜慶峰,李 娜.白盒測試基路徑算法[J].計(jì)算機(jī)工程,2009,35(15):100-102,123.

    [9]張志華,牟永敏.基于函數(shù)調(diào)用的路徑覆蓋生成技術(shù)研究[J].電子學(xué)報(bào),2010,38(8):1808-1811.

    [10]Zheng Huiyu,Mu Yongmin,Zhang Zhihua.Research on the Static Function Call Path Generating Automatically[C]//Proc.of the 2nd IEEE International Conference on Information Management and Engineering.Chengdu,China:[s.n.],2010:405-409.

    [11]Jiang Yu,Mu Yongmin,Zhang Zhihua.Modificatory Indentification Algorithm Research for Source Code Oriented[C]//Proc.of the 2nd International Workshop on Education Technology and Computer Science.Wuhan,China:[s.n.],2010:388-391.

    [12]Rothermel G,Untch R H,Chu Chengyun,et al.Prioritizing Test Cases for Regression Testing[J].IEEE Transactions on Software Engineering,2001,27(10):929-948.

    猜你喜歡
    函數(shù)調(diào)用測試用例排序
    排序不等式
    基于C語言的數(shù)學(xué)菜單的設(shè)計(jì)與實(shí)現(xiàn)
    基于SmartUnit的安全通信系統(tǒng)單元測試用例自動生成
    恐怖排序
    節(jié)日排序
    基于混合遺傳算法的回歸測試用例集最小化研究
    基于函數(shù)調(diào)用序列模式和函數(shù)調(diào)用圖的程序缺陷檢測方法*
    刻舟求劍
    兒童繪本(2018年5期)2018-04-12 16:45:32
    探討C++編程中避免代碼冗余的技巧
    Unity3D項(xiàng)目腳本優(yōu)化分析與研究
    中國新通信(2017年1期)2017-03-08 03:12:21
    12—13女人毛片做爰片一| 日本免费一区二区三区高清不卡 | 女生性感内裤真人,穿戴方法视频| 日韩欧美免费精品| 很黄的视频免费| 九色国产91popny在线| 手机成人av网站| 人人妻,人人澡人人爽秒播| 亚洲第一青青草原| 久久久久国内视频| svipshipincom国产片| 两性午夜刺激爽爽歪歪视频在线观看 | 中文字幕色久视频| 女人爽到高潮嗷嗷叫在线视频| 午夜精品国产一区二区电影| 女性生殖器流出的白浆| tocl精华| 亚洲色图综合在线观看| 伊人久久大香线蕉亚洲五| 十八禁网站免费在线| 十八禁人妻一区二区| 日韩欧美在线二视频| 久久精品亚洲熟妇少妇任你| 日韩 欧美 亚洲 中文字幕| 精品国产乱码久久久久久男人| 无人区码免费观看不卡| 国产熟女xx| 欧美+亚洲+日韩+国产| 欧美日本中文国产一区发布| 18禁黄网站禁片午夜丰满| xxx96com| 黄色 视频免费看| 人人妻人人爽人人添夜夜欢视频| 成年人黄色毛片网站| 国产av一区在线观看免费| 老司机在亚洲福利影院| 他把我摸到了高潮在线观看| 日日干狠狠操夜夜爽| 禁无遮挡网站| a级毛片在线看网站| 性欧美人与动物交配| 国产成人影院久久av| 色av中文字幕| 国产精品国产高清国产av| 成人av一区二区三区在线看| 搡老岳熟女国产| 久久中文看片网| 天堂√8在线中文| 午夜福利免费观看在线| 久久久久久久精品吃奶| 亚洲精品国产色婷婷电影| 亚洲午夜精品一区,二区,三区| 女人高潮潮喷娇喘18禁视频| 最近最新中文字幕大全免费视频| 高清在线国产一区| 九色亚洲精品在线播放| 欧美激情 高清一区二区三区| 欧美成人一区二区免费高清观看 | 精品乱码久久久久久99久播| 亚洲一卡2卡3卡4卡5卡精品中文| 我的亚洲天堂| 嫩草影视91久久| 国产三级黄色录像| 女人精品久久久久毛片| 亚洲一区中文字幕在线| 亚洲第一青青草原| 亚洲色图 男人天堂 中文字幕| 亚洲情色 制服丝袜| 日本黄色视频三级网站网址| 中文字幕人妻丝袜一区二区| 久久久精品国产亚洲av高清涩受| 中文字幕精品免费在线观看视频| 99re在线观看精品视频| www.www免费av| 级片在线观看| 老熟妇仑乱视频hdxx| 亚洲精品美女久久av网站| 99在线视频只有这里精品首页| 精品国产乱子伦一区二区三区| 亚洲中文字幕一区二区三区有码在线看 | 中文字幕色久视频| 黑人巨大精品欧美一区二区mp4| 丰满的人妻完整版| 国产亚洲av嫩草精品影院| 黑人欧美特级aaaaaa片| 大型黄色视频在线免费观看| 欧美日韩中文字幕国产精品一区二区三区 | 久久青草综合色| 老汉色∧v一级毛片| 国产一区二区三区综合在线观看| e午夜精品久久久久久久| 欧美乱码精品一区二区三区| 在线观看免费视频网站a站| 亚洲av熟女| 国产区一区二久久| 啦啦啦观看免费观看视频高清 | 如日韩欧美国产精品一区二区三区| e午夜精品久久久久久久| 欧美性长视频在线观看| 亚洲美女黄片视频| 欧美午夜高清在线| 18禁国产床啪视频网站| 国产亚洲欧美在线一区二区| 成在线人永久免费视频| a级毛片在线看网站| 久久久久九九精品影院| 亚洲人成伊人成综合网2020| 老司机福利观看| av天堂久久9| 国产成人精品久久二区二区免费| 天天一区二区日本电影三级 | 最近最新免费中文字幕在线| 69精品国产乱码久久久| xxx96com| 日韩成人在线观看一区二区三区| 又大又爽又粗| 韩国av一区二区三区四区| 国产又爽黄色视频| 制服诱惑二区| 国产免费男女视频| 宅男免费午夜| 精品国产一区二区久久| 亚洲av五月六月丁香网| 国产精品久久久久久精品电影 | 50天的宝宝边吃奶边哭怎么回事| 亚洲国产毛片av蜜桃av| 亚洲五月婷婷丁香| 精品久久久精品久久久| 亚洲精品久久成人aⅴ小说| 日韩高清综合在线| 波多野结衣巨乳人妻| 久久国产乱子伦精品免费另类| 18禁美女被吸乳视频| 亚洲国产中文字幕在线视频| 成人av一区二区三区在线看| 男女下面插进去视频免费观看| 伦理电影免费视频| 嫩草影视91久久| 18禁美女被吸乳视频| 国产av一区在线观看免费| 久久婷婷成人综合色麻豆| 91成年电影在线观看| 99久久综合精品五月天人人| 麻豆久久精品国产亚洲av| 一个人免费在线观看的高清视频| 国产人伦9x9x在线观看| av天堂在线播放| 亚洲一码二码三码区别大吗| 啦啦啦韩国在线观看视频| 99国产极品粉嫩在线观看| 搡老妇女老女人老熟妇| 我的亚洲天堂| 久久狼人影院| 亚洲人成电影免费在线| 国产精品98久久久久久宅男小说| 成人亚洲精品一区在线观看| 国产人伦9x9x在线观看| 久久久国产欧美日韩av| 一区二区三区精品91| 精品久久久久久久人妻蜜臀av | 欧美日韩一级在线毛片| 亚洲午夜精品一区,二区,三区| 欧美黄色片欧美黄色片| 亚洲成国产人片在线观看| 精品不卡国产一区二区三区| 黄色视频,在线免费观看| 国产亚洲欧美精品永久| 亚洲国产高清在线一区二区三 | 18禁美女被吸乳视频| av天堂久久9| 久久人人97超碰香蕉20202| 亚洲精品粉嫩美女一区| 久久这里只有精品19| 啦啦啦观看免费观看视频高清 | 免费人成视频x8x8入口观看| 91老司机精品| 啦啦啦免费观看视频1| 又大又爽又粗| 免费在线观看视频国产中文字幕亚洲| 国产又色又爽无遮挡免费看| 国产国语露脸激情在线看| 国产免费男女视频| 国产欧美日韩一区二区三| 99精品久久久久人妻精品| 一本大道久久a久久精品| 他把我摸到了高潮在线观看| 亚洲成国产人片在线观看| 亚洲av五月六月丁香网| 日韩精品免费视频一区二区三区| 国产高清有码在线观看视频 | 国产亚洲精品一区二区www| 亚洲 欧美 日韩 在线 免费| 国产精品久久久久久精品电影 | 色播在线永久视频| 在线免费观看的www视频| 热99re8久久精品国产| 国产精品国产高清国产av| 天堂√8在线中文| 可以免费在线观看a视频的电影网站| 夜夜看夜夜爽夜夜摸| 91成年电影在线观看| 国产精品 欧美亚洲| 亚洲 国产 在线| 两个人视频免费观看高清| 怎么达到女性高潮| 在线观看免费视频网站a站| 亚洲五月婷婷丁香| aaaaa片日本免费| 一进一出好大好爽视频| 亚洲中文av在线| 国产精品久久视频播放| 法律面前人人平等表现在哪些方面| 国产成+人综合+亚洲专区| 麻豆久久精品国产亚洲av| 51午夜福利影视在线观看| 午夜久久久久精精品| 午夜免费成人在线视频| 久久精品成人免费网站| 成人永久免费在线观看视频| 亚洲精品美女久久av网站| 精品欧美一区二区三区在线| 97碰自拍视频| 禁无遮挡网站| 亚洲欧美精品综合一区二区三区| 国内毛片毛片毛片毛片毛片| 淫妇啪啪啪对白视频| 亚洲美女黄片视频| 久久久国产成人免费| 欧美乱码精品一区二区三区| 欧美激情 高清一区二区三区| 欧美丝袜亚洲另类 | 免费搜索国产男女视频| 日本三级黄在线观看| 啦啦啦韩国在线观看视频| 女警被强在线播放| 法律面前人人平等表现在哪些方面| 亚洲专区国产一区二区| 精品免费久久久久久久清纯| 中文字幕高清在线视频| 欧美黄色片欧美黄色片| 欧美中文日本在线观看视频| 伊人久久大香线蕉亚洲五| 免费看十八禁软件| 欧美精品啪啪一区二区三区| av在线天堂中文字幕| 欧美久久黑人一区二区| 国产又爽黄色视频| 性少妇av在线| 丝袜在线中文字幕| 黄片大片在线免费观看| 亚洲欧美精品综合一区二区三区| 免费女性裸体啪啪无遮挡网站| 亚洲情色 制服丝袜| 成人三级黄色视频| 别揉我奶头~嗯~啊~动态视频| 一边摸一边抽搐一进一出视频| 亚洲中文av在线| 日韩欧美国产在线观看| 欧美黑人精品巨大| 亚洲欧美精品综合久久99| 日本免费一区二区三区高清不卡 | 一边摸一边抽搐一进一出视频| 亚洲无线在线观看| 可以在线观看毛片的网站| av视频免费观看在线观看| 两人在一起打扑克的视频| 精品国产超薄肉色丝袜足j| 亚洲七黄色美女视频| 窝窝影院91人妻| 亚洲激情在线av| 国产成人欧美在线观看| 最好的美女福利视频网| 精品无人区乱码1区二区| 国产午夜福利久久久久久| 久久精品国产亚洲av高清一级| 一级毛片高清免费大全| 国产午夜精品久久久久久| 法律面前人人平等表现在哪些方面| av天堂在线播放| 99在线视频只有这里精品首页| 少妇 在线观看| or卡值多少钱| 91精品国产国语对白视频| 久久精品国产清高在天天线| 欧美中文综合在线视频| 巨乳人妻的诱惑在线观看| 老司机午夜十八禁免费视频| 亚洲全国av大片| 亚洲成av人片免费观看| 国产视频一区二区在线看| 高清黄色对白视频在线免费看| 亚洲午夜理论影院| 亚洲人成77777在线视频| 国内精品久久久久精免费| 他把我摸到了高潮在线观看| 亚洲欧美精品综合久久99| 午夜免费成人在线视频| 老司机午夜十八禁免费视频| 久久欧美精品欧美久久欧美| 日本一区二区免费在线视频| 日韩免费av在线播放| 一本久久中文字幕| 国产精品亚洲一级av第二区| 丝袜人妻中文字幕| 激情在线观看视频在线高清| 日日干狠狠操夜夜爽| 亚洲国产日韩欧美精品在线观看 | 日韩有码中文字幕| 免费在线观看影片大全网站| 精品欧美国产一区二区三| 久热爱精品视频在线9| 51午夜福利影视在线观看| 欧美日本视频| 黄色视频,在线免费观看| 窝窝影院91人妻| 欧美黑人欧美精品刺激| 夜夜躁狠狠躁天天躁| 国产91精品成人一区二区三区| 人妻久久中文字幕网| 亚洲少妇的诱惑av| 亚洲成av片中文字幕在线观看| 色综合欧美亚洲国产小说| 亚洲精品一区av在线观看| 人人妻人人澡人人看| 国产高清视频在线播放一区| 在线观看日韩欧美| 午夜视频精品福利| 别揉我奶头~嗯~啊~动态视频| 亚洲电影在线观看av| 制服丝袜大香蕉在线| 精品高清国产在线一区| 久久久国产精品麻豆| 看免费av毛片| 亚洲精品美女久久av网站| 久久久久久久久免费视频了| 88av欧美| 免费在线观看日本一区| 欧美激情极品国产一区二区三区| 99精品在免费线老司机午夜| 国产一区二区在线av高清观看| 人妻丰满熟妇av一区二区三区| 91麻豆精品激情在线观看国产| 亚洲第一电影网av| 国产免费av片在线观看野外av| 午夜久久久在线观看| 久久狼人影院| 日本在线视频免费播放| 午夜免费观看网址| 丰满人妻熟妇乱又伦精品不卡| 精品国产一区二区三区四区第35| 欧美中文综合在线视频| 免费av毛片视频| 日本三级黄在线观看| 在线观看免费视频网站a站| 熟女少妇亚洲综合色aaa.| 中文字幕人成人乱码亚洲影| 欧美日韩亚洲国产一区二区在线观看| 男女做爰动态图高潮gif福利片 | 成人三级黄色视频| 人妻久久中文字幕网| 国产真人三级小视频在线观看| 中出人妻视频一区二区| 午夜a级毛片| 亚洲av电影不卡..在线观看| 在线观看免费视频网站a站| 精品久久久久久成人av| 久热这里只有精品99| 日本在线视频免费播放| 亚洲,欧美精品.| 伦理电影免费视频| 88av欧美| 亚洲精品av麻豆狂野| 亚洲熟妇熟女久久| 久久国产亚洲av麻豆专区| 欧美激情极品国产一区二区三区| 亚洲国产欧美网| 91成年电影在线观看| 精品卡一卡二卡四卡免费| 天天添夜夜摸| 无限看片的www在线观看| 性色av乱码一区二区三区2| 久久精品亚洲熟妇少妇任你| 亚洲国产欧美一区二区综合| 亚洲中文字幕日韩| 亚洲色图 男人天堂 中文字幕| 黄网站色视频无遮挡免费观看| or卡值多少钱| 亚洲午夜理论影院| 亚洲欧美一区二区三区黑人| 国产精品1区2区在线观看.| 中亚洲国语对白在线视频| 黄色成人免费大全| 久久性视频一级片| 午夜视频精品福利| 国产亚洲av嫩草精品影院| 久久精品国产综合久久久| 国产蜜桃级精品一区二区三区| 女人精品久久久久毛片| 国产xxxxx性猛交| 免费久久久久久久精品成人欧美视频| 久久精品国产亚洲av香蕉五月| 多毛熟女@视频| 亚洲激情在线av| 九色国产91popny在线| 中文字幕人妻丝袜一区二区| 亚洲中文日韩欧美视频| 香蕉丝袜av| 中文字幕精品免费在线观看视频| 夜夜爽天天搞| 精品国产亚洲在线| 欧美日韩一级在线毛片| 欧美日本亚洲视频在线播放| 精品久久久久久成人av| 99热只有精品国产| 丁香六月欧美| 日韩欧美免费精品| 中文字幕高清在线视频| 日韩欧美三级三区| 校园春色视频在线观看| 亚洲成人免费电影在线观看| 久久中文字幕人妻熟女| 伦理电影免费视频| 在线视频色国产色| 最近最新免费中文字幕在线| 免费在线观看日本一区| 亚洲少妇的诱惑av| 禁无遮挡网站| 一本综合久久免费| 国产精品免费一区二区三区在线| 给我免费播放毛片高清在线观看| 亚洲国产欧美网| 日韩欧美三级三区| 大码成人一级视频| 国产亚洲av高清不卡| 天堂动漫精品| 亚洲国产精品久久男人天堂| 午夜视频精品福利| 69av精品久久久久久| 一级毛片高清免费大全| 每晚都被弄得嗷嗷叫到高潮| 可以在线观看的亚洲视频| 女人高潮潮喷娇喘18禁视频| 国产激情久久老熟女| 免费av毛片视频| 高潮久久久久久久久久久不卡| 90打野战视频偷拍视频| 久久精品亚洲熟妇少妇任你| 麻豆av在线久日| 动漫黄色视频在线观看| x7x7x7水蜜桃| 国产真人三级小视频在线观看| 久久久久精品国产欧美久久久| 国产成年人精品一区二区| 看片在线看免费视频| 精品国产乱码久久久久久男人| 欧美日韩精品网址| 欧美成狂野欧美在线观看| 日韩免费av在线播放| 十分钟在线观看高清视频www| av欧美777| 国产日韩一区二区三区精品不卡| 国产三级黄色录像| 天天一区二区日本电影三级 | 国产精品 欧美亚洲| 欧美黑人欧美精品刺激| 咕卡用的链子| 色精品久久人妻99蜜桃| ponron亚洲| 女人精品久久久久毛片| 国产精品久久久久久精品电影 | 大型黄色视频在线免费观看| 亚洲成国产人片在线观看| 黄色女人牲交| 久久 成人 亚洲| 91av网站免费观看| 少妇 在线观看| 别揉我奶头~嗯~啊~动态视频| 欧美日本亚洲视频在线播放| 在线播放国产精品三级| 国产亚洲欧美在线一区二区| 女性被躁到高潮视频| 日韩高清综合在线| 此物有八面人人有两片| 亚洲男人的天堂狠狠| 欧美黄色片欧美黄色片| 欧美乱码精品一区二区三区| 1024视频免费在线观看| 12—13女人毛片做爰片一| 成人国语在线视频| 久久中文看片网| 在线国产一区二区在线| av超薄肉色丝袜交足视频| 亚洲成人久久性| 国产精品亚洲av一区麻豆| 两个人免费观看高清视频| 可以在线观看毛片的网站| 一夜夜www| 在线观看免费视频日本深夜| 很黄的视频免费| 国产高清激情床上av| 看免费av毛片| 欧美成人性av电影在线观看| 国产午夜福利久久久久久| 操美女的视频在线观看| 国产av一区二区精品久久| 中文字幕久久专区| 亚洲av第一区精品v没综合| 亚洲人成网站在线播放欧美日韩| 国产麻豆成人av免费视频| 一a级毛片在线观看| 亚洲在线自拍视频| 精品福利观看| 一级作爱视频免费观看| 亚洲国产看品久久| 怎么达到女性高潮| 亚洲七黄色美女视频| 999久久久精品免费观看国产| av片东京热男人的天堂| 少妇被粗大的猛进出69影院| 丁香六月欧美| 久久亚洲真实| 国产一区二区三区视频了| 亚洲成国产人片在线观看| 午夜福利,免费看| 久久精品国产综合久久久| 一边摸一边抽搐一进一小说| 女人被躁到高潮嗷嗷叫费观| 老司机午夜十八禁免费视频| 91麻豆精品激情在线观看国产| 麻豆一二三区av精品| 久久亚洲真实| 韩国精品一区二区三区| 欧美另类亚洲清纯唯美| 久久久水蜜桃国产精品网| 美国免费a级毛片| 日韩大码丰满熟妇| 亚洲精品在线观看二区| 法律面前人人平等表现在哪些方面| 亚洲精品国产精品久久久不卡| 成人国产综合亚洲| 国产精品美女特级片免费视频播放器 | 91老司机精品| 女人高潮潮喷娇喘18禁视频| 国产单亲对白刺激| av视频免费观看在线观看| 久久青草综合色| 天天添夜夜摸| 9热在线视频观看99| 在线观看午夜福利视频| 老司机在亚洲福利影院| 亚洲 欧美 日韩 在线 免费| 日本免费a在线| 亚洲欧美日韩另类电影网站| 久久这里只有精品19| 国产欧美日韩一区二区三| 亚洲国产日韩欧美精品在线观看 | 久久久国产成人精品二区| 亚洲成av片中文字幕在线观看| 天天一区二区日本电影三级 | 亚洲第一av免费看| 怎么达到女性高潮| 亚洲黑人精品在线| 亚洲全国av大片| 国产片内射在线| 成在线人永久免费视频| 亚洲三区欧美一区| 久久草成人影院| 啦啦啦 在线观看视频| 精品福利观看| 日本撒尿小便嘘嘘汇集6| 91麻豆精品激情在线观看国产| 国产亚洲精品一区二区www| 欧美成狂野欧美在线观看| 99re在线观看精品视频| 波多野结衣巨乳人妻| 这个男人来自地球电影免费观看| 女人高潮潮喷娇喘18禁视频| 精品久久久久久久久久免费视频| 51午夜福利影视在线观看| 国产欧美日韩一区二区三区在线| 国产精品永久免费网站| 亚洲九九香蕉| 亚洲成人久久性| 久久伊人香网站| 国产一区二区三区在线臀色熟女| 亚洲电影在线观看av| 自拍欧美九色日韩亚洲蝌蚪91| 久久久水蜜桃国产精品网| 一二三四在线观看免费中文在| 欧美丝袜亚洲另类 | 一本大道久久a久久精品| 麻豆国产av国片精品| 国产精品香港三级国产av潘金莲| 国产亚洲精品综合一区在线观看 | 一级,二级,三级黄色视频| 午夜影院日韩av| 免费观看精品视频网站| 亚洲五月天丁香| 女人高潮潮喷娇喘18禁视频| 人妻丰满熟妇av一区二区三区| 电影成人av| 午夜福利18| 成人欧美大片| 日韩大码丰满熟妇| 国产真人三级小视频在线观看| 男男h啪啪无遮挡| a在线观看视频网站| 日韩 欧美 亚洲 中文字幕| 国内精品久久久久精免费| 成在线人永久免费视频| 美女国产高潮福利片在线看| 每晚都被弄得嗷嗷叫到高潮| 亚洲五月婷婷丁香| 亚洲专区中文字幕在线| 少妇的丰满在线观看|