• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于三層知識(shí)模型的軟件缺陷管理系統(tǒng)

    2020-02-27 12:33:54柴海燕王凱風(fēng)謝立鵬
    關(guān)鍵詞:軟件缺陷軟件測(cè)試知識(shí)庫

    柴海燕,丁 霞,王凱風(fēng),謝立鵬

    (京東方科技集團(tuán)股份有限公司,北京 100176)

    0 引言

    通過在軟件上線前對(duì)軟件進(jìn)行測(cè)試發(fā)現(xiàn)軟件缺陷并進(jìn)行修正來提升軟件質(zhì)量,軟件測(cè)試直接關(guān)系到軟件質(zhì)量。軟件測(cè)試研究的熱點(diǎn)領(lǐng)域有測(cè)試用例自動(dòng)生成、測(cè)試用例約簡(jiǎn)、回歸測(cè)試、缺陷分析等[1-4]。測(cè)試用例的約簡(jiǎn)是一個(gè)NP(non-deterministic polynomial)問題,各種算法基于各種均衡搜索最重要的測(cè)試用例,然后用減少測(cè)試用例數(shù)量的方法提升軟件測(cè)試效率。這在理論上有一定價(jià)值,但在實(shí)際工作中并不接受通過犧牲缺陷檢出率而換來的工作時(shí)間的減少,因?yàn)槿魏我粋€(gè)軟件缺陷都會(huì)對(duì)軟件所在的系統(tǒng)造成致命的影響。缺陷分析研究領(lǐng)域基于歷史缺陷數(shù)據(jù)進(jìn)行分析并生成測(cè)試報(bào)告指導(dǎo)測(cè)試工作,比單純減少測(cè)試用例數(shù)量更有價(jià)值。但目前的缺陷分析還是基于數(shù)據(jù)層面分析與預(yù)測(cè),對(duì)軟件測(cè)試工作的價(jià)值貢獻(xiàn)受到局限。通過把知識(shí)庫的結(jié)構(gòu)引入到軟件缺陷管理中,把缺陷分析從數(shù)據(jù)管理層面提升為知識(shí)管理層面,通過機(jī)器學(xué)習(xí)人工智能的方式提取規(guī)則知識(shí),并生成能指導(dǎo)軟件測(cè)試工作的策略報(bào)告,有助于從根本上提升軟件測(cè)試工作水平和效率。

    1 軟件缺陷分析

    在ISO 9000中對(duì)軟件缺陷進(jìn)行了定義,軟件缺陷是指“未滿足與預(yù)期或者規(guī)定用途有關(guān)的要求”。無論開發(fā)人員經(jīng)驗(yàn)多么豐富都不能保證所設(shè)計(jì)的軟件中沒有缺陷。軟件缺陷伴隨著軟件的整個(gè)生命周期,當(dāng)觸發(fā)條件滿足時(shí)就會(huì)觸發(fā)缺陷造成難以估量的損失。軟件測(cè)試工作就是在軟件上線之前發(fā)現(xiàn)軟件中缺陷。

    軟件缺陷分析通過對(duì)軟件開發(fā)測(cè)試過程產(chǎn)生各種缺陷進(jìn)行追蹤分析。借助電子化輔助的方法對(duì)軟件缺陷進(jìn)行記錄、分類整理、統(tǒng)計(jì)分析,可以提升這個(gè)缺陷分析的效率[5-10]。但目前缺陷分析僅僅限于對(duì)缺陷進(jìn)行統(tǒng)計(jì)度量。缺陷的分類方法有很多,IEEE組織提出了的軟件異常分類法,IBM公司提出了正交缺陷分類法,我國(guó)軍方相應(yīng)標(biāo)準(zhǔn)中也對(duì)軟件缺陷進(jìn)行了定義分類,例如《GJB 2786A 軍用軟件開發(fā)通用要求》中關(guān)于軟件錯(cuò)誤的分類。

    2 知識(shí)庫與機(jī)器學(xué)習(xí)

    知識(shí)庫是知識(shí)型人工智能的核心。知識(shí)庫中的知識(shí)分為三層:事實(shí)知識(shí)層、中間層、策略層。其中中間層是基于事實(shí)知識(shí)的規(guī)則過程,策略層是基于中間層知識(shí)的規(guī)則。

    人工智能不能只重視過程方法,說明性方法與經(jīng)驗(yàn)同樣重要。缺陷分析有很多相關(guān)研究,這些研究大多從算法優(yōu)化角度優(yōu)化缺陷分析工作,這種研究方向過于局限。把知識(shí)庫引入到軟件缺陷管理中,可以把缺陷分析管理從缺陷數(shù)據(jù)管理提升對(duì)軟件開發(fā)測(cè)試全流程知識(shí)管理。

    機(jī)器學(xué)習(xí)是一門人工智能的科學(xué),基于數(shù)據(jù)和算法學(xué)習(xí)經(jīng)驗(yàn)提升算法性能。機(jī)器學(xué)習(xí)采用的學(xué)習(xí)策略分為4種:機(jī)器學(xué)習(xí)、傳授學(xué)習(xí)、類比學(xué)習(xí)、通過示例學(xué)習(xí)。通過知識(shí)庫、機(jī)器學(xué)習(xí)算法把傳統(tǒng)的缺陷管理系統(tǒng)升級(jí)為軟件測(cè)試專家系統(tǒng)。

    3 缺陷管理系統(tǒng)功能結(jié)構(gòu)

    在基于知識(shí)庫數(shù)據(jù)挖掘的軟件缺陷管理系統(tǒng)中通過知識(shí)庫架構(gòu)對(duì)缺陷進(jìn)行管理,用三層知識(shí)架構(gòu)把缺陷管理從數(shù)據(jù)層面提升到知識(shí)層面。本文設(shè)計(jì)的缺陷管理系統(tǒng)從4個(gè)方面進(jìn)行軟件測(cè)試缺陷管理,缺陷數(shù)據(jù)管理、缺陷規(guī)則知識(shí)挖掘、缺陷預(yù)測(cè)、缺陷策略知識(shí)配置。其中缺陷數(shù)據(jù)管理對(duì)應(yīng)知識(shí)庫的事實(shí)知識(shí)層,缺陷規(guī)則知識(shí)挖掘?qū)?yīng)知識(shí)庫的中間層,缺陷預(yù)測(cè)與策略配置對(duì)應(yīng)知識(shí)庫的策略知識(shí)層。

    事實(shí)知識(shí)層是知識(shí)庫的基礎(chǔ)層,事實(shí)知識(shí)層的知識(shí)來源于各周邊交互系統(tǒng)或相關(guān)人員。事實(shí)知識(shí)層所采集的數(shù)據(jù)貫穿軟件開發(fā)測(cè)試工作的全流程,事實(shí)知識(shí)層所采集的數(shù)據(jù)質(zhì)量和數(shù)量決定這系統(tǒng)的可用性和有效性。

    軟件開發(fā)是一項(xiàng)系統(tǒng)工程,造成軟件缺陷的因素很多,涉及軟件開發(fā)工程的每個(gè)環(huán)節(jié)。從軟件本身角度看,軟件功能復(fù)雜度、代碼量、軟件架構(gòu)等因素與軟件缺陷都相關(guān)。從軟件開發(fā)過程來看,開發(fā)過程中的需求溝通、文檔質(zhì)量、變更過程版本記錄都會(huì)影響軟件中缺陷的多少。從開發(fā)項(xiàng)目管理角度來看,項(xiàng)目時(shí)間計(jì)劃安排不合理、PM(project manager)人員過程管理不科學(xué)、軟件開發(fā)人員的經(jīng)驗(yàn)缺乏、開發(fā)人員流動(dòng)大都可能引發(fā)軟件缺陷。從軟件開發(fā)方公司層面角度來看,軟件開發(fā)公司規(guī)模、公司資質(zhì)、項(xiàng)目是夠外包等都與軟件質(zhì)量相關(guān)。對(duì)于第三方測(cè)試公司來講,無法控制軟件開發(fā)過程,但盡可能多的獲取軟件開發(fā)相關(guān)信息數(shù)據(jù)了解軟件開發(fā)情況對(duì)軟件測(cè)試工作很有意義??梢酝ㄟ^客戶關(guān)系管理系統(tǒng)對(duì)相關(guān)數(shù)據(jù)進(jìn)行收集管理。

    同樣軟件測(cè)試也是一項(xiàng)系統(tǒng)工程,軟件開發(fā)工程決定了軟件缺陷的數(shù)量。軟件測(cè)試工作決定了檢測(cè)出的軟件缺陷數(shù)量。未檢測(cè)出的軟件缺陷會(huì)造成質(zhì)量問題,帶來各種隱患。從軟件測(cè)試過程來看,測(cè)試人員、測(cè)試文檔、測(cè)試用例設(shè)計(jì)、缺陷歷史數(shù)據(jù)的利用等因素都會(huì)與檢測(cè)出的缺陷數(shù)量相關(guān)同樣直接關(guān)乎軟件質(zhì)量。

    軟件開發(fā)與軟件測(cè)試過程中積累了很多與軟件缺陷相關(guān)的數(shù)據(jù),有效管理利用這些海量數(shù)據(jù)能提升軟件測(cè)試工作的效率。軟件缺陷管理要貫穿整個(gè)軟件開發(fā)與軟件測(cè)試過程,所以缺陷數(shù)據(jù)采集也需要貫穿軟件開發(fā)與測(cè)試全流程。

    事實(shí)知識(shí)層面通過查詢接口已經(jīng)能支撐測(cè)試人員分享獲取軟件測(cè)試相關(guān)知識(shí)。但事實(shí)知識(shí)層數(shù)據(jù)量很大,只適合查詢形式的場(chǎng)景。基于事實(shí)知識(shí)層通過機(jī)器學(xué)習(xí)算法進(jìn)行數(shù)據(jù)挖掘形成規(guī)則知識(shí)層的規(guī)則知識(shí)庫。事實(shí)知識(shí)層面的知識(shí)只是在描述事實(shí),而規(guī)則層知識(shí)則是對(duì)事實(shí)知識(shí)的智能抽取和提煉形成的經(jīng)驗(yàn)規(guī)則。

    基于規(guī)則知識(shí)庫中的知識(shí)對(duì)軟件進(jìn)行預(yù)測(cè)并配置相應(yīng)的策略就是形成了對(duì)軟件測(cè)試工作有價(jià)值的策略層知識(shí)。

    知識(shí)庫三層的知識(shí)對(duì)測(cè)試人員價(jià)值逐層遞增,事實(shí)知識(shí)層只能給相關(guān)人員提供事實(shí)知識(shí)的描述。規(guī)則知識(shí)層能提供通過機(jī)器學(xué)習(xí)算法在事實(shí)知識(shí)的基礎(chǔ)上總結(jié)出的規(guī)則經(jīng)驗(yàn)。而策略知識(shí)層可以對(duì)一個(gè)待測(cè)的軟件項(xiàng)目進(jìn)行缺陷預(yù)測(cè)并提供相應(yīng)的測(cè)試策略報(bào)告來給測(cè)試相關(guān)人員提出測(cè)試相關(guān)的工作建議。

    例如,事實(shí)知識(shí)記錄了軟件開發(fā)公司、開發(fā)人員、模塊分支數(shù)、模塊代碼行數(shù)、缺陷信息等數(shù)據(jù)知識(shí),通過機(jī)器學(xué)習(xí)算法在這些數(shù)據(jù)的基礎(chǔ)上進(jìn)行抽取可以得到一個(gè)規(guī)則知識(shí),“A公司張某某開發(fā)的代碼行數(shù)超過900行分支路徑大于10的程序模塊會(huì)大概率出現(xiàn)缺陷”。通過策略知識(shí)層可以對(duì)一個(gè)待測(cè)的軟件項(xiàng)目輸出缺陷預(yù)測(cè)報(bào)告以及測(cè)試用例設(shè)計(jì)指導(dǎo)報(bào)告。

    基于知識(shí)庫數(shù)據(jù)挖掘的軟件缺陷管理系統(tǒng)核心功能實(shí)現(xiàn)包括8個(gè)模塊:事實(shí)知識(shí)數(shù)據(jù)庫、數(shù)據(jù)預(yù)處理模塊、機(jī)器學(xué)習(xí)算法模塊、規(guī)則抽取模塊、規(guī)則知識(shí)庫、缺陷預(yù)測(cè)模塊、策略知識(shí)庫、賬號(hào)權(quán)限管理與查詢交互子系統(tǒng)。

    事實(shí)知識(shí)數(shù)據(jù)庫是缺陷預(yù)測(cè)管理的基礎(chǔ),事實(shí)知識(shí)數(shù)據(jù)庫存儲(chǔ)著軟件測(cè)試工作中產(chǎn)生的與軟件缺陷相關(guān)的數(shù)據(jù)。事實(shí)知識(shí)數(shù)據(jù)倉庫中的數(shù)據(jù)來源于幾個(gè)方面:測(cè)試人員、業(yè)務(wù)人員、管理人員的輸入以及從相關(guān)系統(tǒng)進(jìn)行采集。事實(shí)知識(shí)數(shù)據(jù)包括:缺陷歷史數(shù)據(jù)、項(xiàng)目管理數(shù)據(jù)、客戶關(guān)系管理數(shù)據(jù)等幾個(gè)方面的數(shù)據(jù)。缺陷歷史數(shù)據(jù)來源缺陷追蹤系統(tǒng),項(xiàng)目管理數(shù)據(jù)來源于測(cè)試管理人員的錄入以及開發(fā)方輸入??蛻魯?shù)據(jù)來源于客戶關(guān)系管理系統(tǒng)。在專業(yè)軟件測(cè)試公司會(huì)有很多客戶,相關(guān)客戶關(guān)系管理系統(tǒng)中記錄著客戶相關(guān)信息。

    數(shù)據(jù)預(yù)處理模塊基于事實(shí)知識(shí)數(shù)據(jù)庫中的數(shù)據(jù)進(jìn)行ETL(extract-transform-load)處理形成基礎(chǔ)事實(shí)數(shù)據(jù)表?;A(chǔ)事實(shí)數(shù)據(jù)表有兩個(gè)類型的字段組成,缺陷標(biāo)識(shí)字段以及測(cè)試屬性字段。缺陷標(biāo)識(shí)字段標(biāo)識(shí)缺陷類型,測(cè)試屬性數(shù)據(jù)是與測(cè)試用例、測(cè)試缺陷相關(guān)的維度屬性。

    機(jī)器學(xué)習(xí)模塊把預(yù)處理模塊輸出的基礎(chǔ)事實(shí)數(shù)據(jù)表作為輸入,經(jīng)過機(jī)器學(xué)習(xí)算法輸出規(guī)則樹。規(guī)則抽取模塊根據(jù)缺陷管理目標(biāo)抽取缺陷規(guī)則,形成規(guī)則知識(shí)。規(guī)則知識(shí)庫存儲(chǔ)規(guī)則知識(shí)。軟件預(yù)測(cè)模塊基于規(guī)則知識(shí)庫中的規(guī)則對(duì)軟件進(jìn)行預(yù)測(cè),策略知識(shí)庫對(duì)預(yù)測(cè)結(jié)果配置相應(yīng)的缺陷管理策略。

    圖1 系統(tǒng)功能模塊圖

    4 缺陷管理主要流程

    4.1 基于知識(shí)共享的測(cè)試交互流程

    缺陷管理系統(tǒng)基于知識(shí)庫進(jìn)行設(shè)計(jì),知識(shí)庫本質(zhì)是進(jìn)行知識(shí)的加工與分享。這種共享不僅是測(cè)試人員之間、測(cè)試人員與項(xiàng)目管理人員,而且是測(cè)試人員、測(cè)試項(xiàng)目管理人員與軟件開發(fā)方的知識(shí)共享。所以基于此系統(tǒng)進(jìn)行缺陷管理其實(shí)是一個(gè)知識(shí)共享的過程?;谥R(shí)共享的測(cè)試流程涉及的實(shí)體包括:軟件開發(fā)方、缺陷管理系統(tǒng)、項(xiàng)目管理人員、測(cè)試人員。

    圖2 基于知識(shí)共享的測(cè)試交互流程圖

    開發(fā)方提供相關(guān)數(shù)據(jù)到缺陷管理系統(tǒng)。相關(guān)管理人員向缺陷管理系統(tǒng)輸入項(xiàng)目相關(guān)數(shù)據(jù)、配置相應(yīng)策略。管理系統(tǒng)給測(cè)試人員提供知識(shí)查詢、知識(shí)報(bào)告服務(wù)。管理系統(tǒng)給開發(fā)方提供缺陷相關(guān)信息以及改進(jìn)建議,將測(cè)試結(jié)果以及缺陷建議報(bào)告反饋給開發(fā)方。

    4.2 規(guī)則知識(shí)挖掘流程

    從事實(shí)知識(shí)到規(guī)則知識(shí)需要經(jīng)過機(jī)器學(xué)習(xí)算法進(jìn)行數(shù)據(jù)挖掘。數(shù)據(jù)挖掘的流程包括數(shù)據(jù)預(yù)處理、機(jī)器學(xué)習(xí)、規(guī)則抽取、規(guī)則評(píng)估、規(guī)則入庫等5個(gè)步驟。

    圖3 規(guī)則知識(shí)挖掘流程

    第一步:數(shù)據(jù)預(yù)處理就是把事實(shí)知識(shí)數(shù)據(jù)庫的數(shù)據(jù)進(jìn)行加工處理成機(jī)器學(xué)習(xí)算法所要求的數(shù)據(jù)輸入格式。事實(shí)知識(shí)數(shù)據(jù)庫的數(shù)據(jù)包括測(cè)試歷史數(shù)據(jù)、缺陷歷史數(shù)據(jù)(Software Defect Manegement Data)、項(xiàng)目管理數(shù)據(jù)(project management data,PMD)、客戶關(guān)系管理數(shù)據(jù)(customer relationship management data,CRMD)。測(cè)試歷史數(shù)據(jù)主要包括測(cè)試用例、測(cè)試人員,缺陷歷史數(shù)據(jù)記錄著軟件測(cè)試工作測(cè)試出的缺陷相關(guān)信息,包括被測(cè)軟件項(xiàng)目信息、測(cè)試人員信息、測(cè)試用例數(shù)據(jù)、缺陷相關(guān)數(shù)據(jù)。項(xiàng)目管理數(shù)據(jù)包括項(xiàng)目描述數(shù)據(jù)、開發(fā)人員數(shù)據(jù)、開發(fā)過程數(shù)據(jù)、需求文檔、設(shè)計(jì)規(guī)范文檔、源代碼數(shù)據(jù)。客戶關(guān)系管理數(shù)據(jù),軟件開發(fā)方公司相關(guān)數(shù)據(jù)。這些數(shù)據(jù)處理成由缺陷標(biāo)識(shí)字段與屬性字段組成的數(shù)據(jù)表。

    數(shù)據(jù)表按照8:2的比例把數(shù)據(jù)表記錄分為訓(xùn)練數(shù)據(jù)集合和驗(yàn)證數(shù)據(jù)集合。訓(xùn)練數(shù)據(jù)集合用于訓(xùn)練生成規(guī)則,驗(yàn)證數(shù)據(jù)集合用于驗(yàn)證規(guī)則的性能。

    第二步:基于前面步驟生成的缺陷標(biāo)識(shí)、屬性字段訓(xùn)練數(shù)據(jù)表進(jìn)行數(shù)據(jù)挖掘形成規(guī)則樹。數(shù)據(jù)挖掘的過程由機(jī)器學(xué)習(xí)算法完成。缺陷歷史數(shù)據(jù)中包括軟件缺陷情況以及缺陷類型,所以可以用有監(jiān)督機(jī)器學(xué)習(xí)模型進(jìn)行數(shù)據(jù)訓(xùn)練,找到缺陷類別與屬性數(shù)據(jù)之間的規(guī)則。缺陷預(yù)測(cè)問題可以抽象成分類問題。這里采用決策樹算法對(duì)數(shù)據(jù)進(jìn)行訓(xùn)練學(xué)習(xí)生成規(guī)則樹。

    第三步:在規(guī)則樹的基礎(chǔ)上進(jìn)行規(guī)則抽取。規(guī)則樹每個(gè)根節(jié)點(diǎn)以及中間節(jié)點(diǎn)對(duì)應(yīng)個(gè)屬性,葉子節(jié)點(diǎn)代表缺陷類別。每一條從規(guī)則樹根節(jié)點(diǎn)到葉子節(jié)點(diǎn)的路徑抽取成一條規(guī)則。遍歷每條從根節(jié)點(diǎn)到葉子節(jié)點(diǎn)的數(shù)據(jù)路徑就完成了規(guī)則抽取過程。

    第四步:對(duì)抽取的規(guī)則在驗(yàn)證數(shù)據(jù)集合上進(jìn)行驗(yàn)證,得到精準(zhǔn)度、覆蓋度等指標(biāo)。根據(jù)設(shè)定的指標(biāo)閾值對(duì)指標(biāo)進(jìn)行取舍,保留符合指標(biāo)要求的規(guī)則。

    第五步:前面符合要求規(guī)則入到知識(shí)庫的規(guī)則庫,入庫后這些規(guī)則就形成了規(guī)則知識(shí)層中的知識(shí)。

    4.3 缺陷預(yù)測(cè)與策略報(bào)告生成流程

    事實(shí)規(guī)則知識(shí)經(jīng)過規(guī)則知識(shí)挖掘流程的處理得到規(guī)則知識(shí),基于這些規(guī)則知識(shí)可以進(jìn)行缺陷的預(yù)測(cè)輸出缺陷預(yù)測(cè)報(bào)告。缺陷預(yù)測(cè)不是最終目的,對(duì)預(yù)測(cè)到缺陷采取相應(yīng)的應(yīng)對(duì)措施才能發(fā)揮出規(guī)則知識(shí)的價(jià)值。缺陷預(yù)測(cè)與策略生成由策略知識(shí)層控制。策略知識(shí)層的輸入為軟件項(xiàng)目資料數(shù)據(jù),輸出為缺陷預(yù)測(cè)報(bào)告以及策略生成報(bào)告。

    圖4 缺陷預(yù)測(cè)與策略報(bào)告生成流程圖

    缺陷預(yù)測(cè)與策略報(bào)告生成流程主要包括項(xiàng)目數(shù)據(jù)關(guān)聯(lián)、

    規(guī)則匹配、生成缺陷報(bào)告、調(diào)取策略規(guī)則、生成策略報(bào)告五個(gè)步驟。

    第一步:一個(gè)軟件開發(fā)完后交付給測(cè)試公司或者部門進(jìn)行測(cè)試,軟件項(xiàng)目相關(guān)資料數(shù)據(jù)存儲(chǔ)在缺陷管理系統(tǒng)中。首先要做的就是對(duì)項(xiàng)目數(shù)據(jù)進(jìn)行數(shù)據(jù)關(guān)聯(lián)。所謂數(shù)據(jù)關(guān)聯(lián)就是 把待測(cè)項(xiàng)目數(shù)據(jù)與缺陷管理系統(tǒng)中事實(shí)知識(shí)庫中數(shù)據(jù)進(jìn)行ID(identification)關(guān)聯(lián)。匹配項(xiàng)目對(duì)應(yīng)的公司客戶信息、缺陷歷史信息、測(cè)試歷史信息等屬性數(shù)據(jù)。

    第二步:對(duì)關(guān)聯(lián)后的項(xiàng)目屬性數(shù)據(jù)以及規(guī)則知識(shí)層的規(guī)則進(jìn)行匹配,如果有匹配到規(guī)則那么就可以進(jìn)行下一步。如果沒有匹配到規(guī)則提示這些數(shù)據(jù)作為訓(xùn)練數(shù)據(jù)入庫用戶規(guī)則的訓(xùn)練與提取。

    第三步:根據(jù)規(guī)則知識(shí)層的規(guī)則知識(shí)對(duì)軟件項(xiàng)目進(jìn)行缺陷預(yù)測(cè)并生成缺陷報(bào)告。缺陷報(bào)告的內(nèi)容為對(duì)軟件中具體模塊缺陷概率以及缺陷類型進(jìn)行預(yù)測(cè)分析。

    第四步:缺陷報(bào)告只是對(duì)模塊的風(fēng)險(xiǎn)進(jìn)行了預(yù)測(cè),還需進(jìn)一步生成對(duì)應(yīng)每個(gè)模塊風(fēng)險(xiǎn)采取的措施,也就是策略報(bào)告。策略報(bào)告的生成基于策略規(guī)則。調(diào)取策略規(guī)則就是為每種缺陷類型匹配相應(yīng)的策略規(guī)則。策略規(guī)則基于測(cè)試項(xiàng)目管理人員的配置。如果積累足夠的數(shù)據(jù)也可以通過機(jī)器學(xué)習(xí)生成策略規(guī)則。

    第五步:基于匹配的策略規(guī)則生成策略報(bào)告。策略報(bào)告的內(nèi)容為對(duì)應(yīng)每個(gè)預(yù)測(cè)到缺陷采取的策略,指導(dǎo)測(cè)試用例生成密度以及測(cè)試用戶設(shè)計(jì)方案等測(cè)試動(dòng)作。

    5 結(jié)束語

    基于知識(shí)庫的軟件缺陷管理系統(tǒng)用知識(shí)庫三層架構(gòu)對(duì)軟件開發(fā)測(cè)試過程中與軟件缺陷相關(guān)的數(shù)據(jù)進(jìn)行知識(shí)化管理,通過對(duì)事實(shí)知識(shí)進(jìn)行挖掘形成規(guī)則知識(shí),配置相關(guān)策略形成策略知識(shí),提升缺陷管理的水平和效率。本文主要設(shè)計(jì)了系統(tǒng)部的功能架構(gòu)與主要流程,后面工作還將對(duì)規(guī)則知識(shí)的挖掘算法進(jìn)行研究,可以從指標(biāo)設(shè)計(jì)、模型優(yōu)化等方面對(duì)挖掘算法進(jìn)行提升。

    猜你喜歡
    軟件缺陷軟件測(cè)試知識(shí)庫
    基于源文件可疑度的靜態(tài)軟件缺陷檢測(cè)方法研究
    基于OBE的軟件測(cè)試課程教學(xué)改革探索
    基于TRIZ與知識(shí)庫的創(chuàng)新模型構(gòu)建及在注塑機(jī)設(shè)計(jì)中的應(yīng)用
    EXCEL和VBA實(shí)現(xiàn)軟件測(cè)試記錄管理
    電子制作(2018年16期)2018-09-26 03:27:18
    基于NPE-SVM的軟件缺陷預(yù)測(cè)模型
    關(guān)于軟件測(cè)試技術(shù)應(yīng)用與發(fā)展趨勢(shì)研究
    開源程序的軟件缺陷分布特征的量化分析研究
    軟件測(cè)試工程化模型及應(yīng)用研究
    高速公路信息系統(tǒng)維護(hù)知識(shí)庫的建立和應(yīng)用
    基于Drupal發(fā)布學(xué)者知識(shí)庫關(guān)聯(lián)數(shù)據(jù)的研究
    圖書館研究(2015年5期)2015-12-07 04:05:48
    日本-黄色视频高清免费观看| 国产日韩一区二区三区精品不卡 | 免费黄频网站在线观看国产| 一本一本综合久久| 美女福利国产在线| 六月丁香七月| 精品少妇内射三级| av在线播放精品| 男男h啪啪无遮挡| 国产免费一区二区三区四区乱码| 大片免费播放器 马上看| 日本av手机在线免费观看| 天美传媒精品一区二区| 免费大片18禁| 色视频在线一区二区三区| 在线观看美女被高潮喷水网站| 嫩草影院新地址| 亚洲国产精品一区三区| 亚洲欧美日韩卡通动漫| 9色porny在线观看| 亚洲欧洲精品一区二区精品久久久 | 乱人伦中国视频| 国产日韩欧美亚洲二区| 性色av一级| 日韩欧美精品免费久久| 一区二区三区免费毛片| av卡一久久| 国产成人a∨麻豆精品| 久久97久久精品| 99九九线精品视频在线观看视频| 成人18禁高潮啪啪吃奶动态图 | 亚洲成人av在线免费| 人人妻人人澡人人爽人人夜夜| 性高湖久久久久久久久免费观看| 久久久国产精品麻豆| 国产黄片美女视频| 亚洲成色77777| 麻豆精品久久久久久蜜桃| 特大巨黑吊av在线直播| 亚洲精品久久午夜乱码| 99久久综合免费| 在线播放无遮挡| 亚洲一区二区三区欧美精品| 国语对白做爰xxxⅹ性视频网站| 免费大片18禁| 久久综合国产亚洲精品| 国产免费视频播放在线视频| 亚洲av免费高清在线观看| 久久人人爽人人片av| 欧美 日韩 精品 国产| 成年av动漫网址| 午夜影院在线不卡| 国产精品不卡视频一区二区| 免费看光身美女| 亚洲成色77777| 国产成人精品无人区| 久久99蜜桃精品久久| 看非洲黑人一级黄片| 菩萨蛮人人尽说江南好唐韦庄| 日韩中文字幕视频在线看片| 中国三级夫妇交换| a级毛片免费高清观看在线播放| 国产高清有码在线观看视频| 亚洲av免费高清在线观看| 国产视频内射| 熟妇人妻不卡中文字幕| 日本欧美视频一区| 麻豆成人av视频| 国产白丝娇喘喷水9色精品| 边亲边吃奶的免费视频| 国产熟女午夜一区二区三区 | 久久99蜜桃精品久久| 日本vs欧美在线观看视频 | 免费人成在线观看视频色| 亚洲无线观看免费| 在线天堂最新版资源| 亚洲激情五月婷婷啪啪| 免费观看a级毛片全部| 久久人人爽av亚洲精品天堂| 丰满迷人的少妇在线观看| 卡戴珊不雅视频在线播放| 亚洲精品日本国产第一区| 美女视频免费永久观看网站| 蜜桃久久精品国产亚洲av| 日本欧美视频一区| 内射极品少妇av片p| 全区人妻精品视频| 汤姆久久久久久久影院中文字幕| 国产午夜精品久久久久久一区二区三区| 草草在线视频免费看| 精品久久国产蜜桃| 免费观看性生交大片5| 日韩免费高清中文字幕av| 久久久久精品性色| 热re99久久精品国产66热6| 中文字幕免费在线视频6| 大又大粗又爽又黄少妇毛片口| 少妇的逼水好多| 国产精品一区二区三区四区免费观看| 日韩欧美 国产精品| 国产免费福利视频在线观看| 男人舔奶头视频| 日韩伦理黄色片| 国产精品三级大全| 我要看日韩黄色一级片| 免费观看无遮挡的男女| 插阴视频在线观看视频| 欧美精品亚洲一区二区| 内地一区二区视频在线| 久久国产精品男人的天堂亚洲 | 久久久国产一区二区| 国产高清有码在线观看视频| 国产在视频线精品| 少妇 在线观看| 黑人巨大精品欧美一区二区蜜桃 | 国产精品女同一区二区软件| 热re99久久国产66热| 五月天丁香电影| 99热这里只有是精品在线观看| 亚洲av不卡在线观看| 99久久精品一区二区三区| 成年人免费黄色播放视频 | 亚洲美女搞黄在线观看| 久久精品熟女亚洲av麻豆精品| 国产av一区二区精品久久| 大香蕉久久网| 在线观看av片永久免费下载| 99久久中文字幕三级久久日本| 91久久精品国产一区二区三区| 男男h啪啪无遮挡| 99久国产av精品国产电影| 欧美3d第一页| 晚上一个人看的免费电影| 夜夜爽夜夜爽视频| 人妻一区二区av| 少妇高潮的动态图| 黄色配什么色好看| 欧美老熟妇乱子伦牲交| av专区在线播放| 成人美女网站在线观看视频| 日韩在线高清观看一区二区三区| 三级国产精品欧美在线观看| 国产真实伦视频高清在线观看| 国产成人91sexporn| 久久精品国产自在天天线| 国产极品粉嫩免费观看在线 | 蜜桃在线观看..| 国产精品人妻久久久久久| 日本免费在线观看一区| 国产熟女午夜一区二区三区 | 九色成人免费人妻av| 人人妻人人添人人爽欧美一区卜| 日本欧美国产在线视频| 妹子高潮喷水视频| 国产日韩欧美亚洲二区| 欧美人与善性xxx| 欧美三级亚洲精品| 免费人妻精品一区二区三区视频| 成人国产av品久久久| 最新中文字幕久久久久| 婷婷色综合大香蕉| 成人影院久久| 欧美日韩国产mv在线观看视频| 99热6这里只有精品| 亚洲三级黄色毛片| 黄色一级大片看看| 91午夜精品亚洲一区二区三区| 最近最新中文字幕免费大全7| av一本久久久久| 亚洲四区av| 十八禁高潮呻吟视频 | 成人特级av手机在线观看| 婷婷色综合www| 午夜精品国产一区二区电影| 亚洲欧美成人精品一区二区| 亚洲精品456在线播放app| 一级黄片播放器| 久久狼人影院| 亚洲欧美精品自产自拍| 少妇人妻 视频| 午夜免费鲁丝| 久久精品久久久久久久性| 丝瓜视频免费看黄片| 久久亚洲国产成人精品v| 亚洲欧美成人精品一区二区| 永久网站在线| 亚洲怡红院男人天堂| 久久精品久久精品一区二区三区| 国产精品久久久久成人av| 亚洲不卡免费看| 国产伦理片在线播放av一区| 日韩欧美 国产精品| 美女国产视频在线观看| 美女福利国产在线| 一级av片app| 国产欧美日韩精品一区二区| 欧美区成人在线视频| 日韩不卡一区二区三区视频在线| 亚洲av电影在线观看一区二区三区| 免费观看的影片在线观看| 久久久久久久大尺度免费视频| 国产精品99久久久久久久久| 大话2 男鬼变身卡| 3wmmmm亚洲av在线观看| 日韩制服骚丝袜av| 男女国产视频网站| 综合色丁香网| 少妇熟女欧美另类| 精品久久久噜噜| 看免费成人av毛片| 国产精品福利在线免费观看| 美女主播在线视频| 精品久久久久久电影网| 久久ye,这里只有精品| √禁漫天堂资源中文www| 国产欧美另类精品又又久久亚洲欧美| 91久久精品国产一区二区三区| 免费观看性生交大片5| 老司机亚洲免费影院| 亚洲精品乱码久久久v下载方式| 18+在线观看网站| 在线观看一区二区三区激情| 久久久久久久大尺度免费视频| 欧美 日韩 精品 国产| 蜜桃在线观看..| 久久av网站| 看免费成人av毛片| 成人毛片a级毛片在线播放| 成人黄色视频免费在线看| 丰满乱子伦码专区| 最近手机中文字幕大全| 少妇人妻精品综合一区二区| 久久久国产欧美日韩av| 久久鲁丝午夜福利片| 两个人的视频大全免费| 黄片无遮挡物在线观看| 亚洲怡红院男人天堂| 五月玫瑰六月丁香| 中文字幕av电影在线播放| 国产精品嫩草影院av在线观看| 亚洲精品456在线播放app| 国产成人午夜福利电影在线观看| 久久国产精品大桥未久av | 天美传媒精品一区二区| 99久国产av精品国产电影| 香蕉精品网在线| 亚洲丝袜综合中文字幕| 最近中文字幕2019免费版| 最新的欧美精品一区二区| 美女主播在线视频| 亚洲内射少妇av| 亚洲综合精品二区| 亚洲欧美一区二区三区国产| 美女视频免费永久观看网站| 成人美女网站在线观看视频| 国产男女超爽视频在线观看| 国产 一区精品| 男女边吃奶边做爰视频| 欧美 亚洲 国产 日韩一| 韩国高清视频一区二区三区| 国产一级毛片在线| 久久久a久久爽久久v久久| 91精品一卡2卡3卡4卡| 成人毛片60女人毛片免费| 亚洲熟女精品中文字幕| 18禁裸乳无遮挡动漫免费视频| 少妇猛男粗大的猛烈进出视频| 欧美xxxx性猛交bbbb| 99热这里只有是精品50| h日本视频在线播放| 观看av在线不卡| 欧美另类一区| 国产精品熟女久久久久浪| 成人二区视频| 久久毛片免费看一区二区三区| 99re6热这里在线精品视频| 亚洲美女黄色视频免费看| av免费在线看不卡| 亚洲精品国产成人久久av| 色婷婷久久久亚洲欧美| 三上悠亚av全集在线观看 | 极品人妻少妇av视频| 亚洲情色 制服丝袜| 99久国产av精品国产电影| 大又大粗又爽又黄少妇毛片口| 欧美三级亚洲精品| 免费播放大片免费观看视频在线观看| 成人18禁高潮啪啪吃奶动态图 | 哪个播放器可以免费观看大片| 深夜a级毛片| 色吧在线观看| 午夜91福利影院| 国产色爽女视频免费观看| 成人免费观看视频高清| 少妇被粗大猛烈的视频| 国产日韩一区二区三区精品不卡 | 久热这里只有精品99| 日韩电影二区| 久久久久国产网址| 日本av免费视频播放| 我要看日韩黄色一级片| 免费在线观看成人毛片| 国产在线男女| 日韩一本色道免费dvd| 大码成人一级视频| 春色校园在线视频观看| 亚洲国产欧美日韩在线播放 | 自拍偷自拍亚洲精品老妇| 色视频在线一区二区三区| 亚洲欧美日韩另类电影网站| 精品人妻一区二区三区麻豆| .国产精品久久| 黄片无遮挡物在线观看| 国产精品久久久久久av不卡| 熟妇人妻不卡中文字幕| www.av在线官网国产| 国产精品成人在线| 日韩强制内射视频| 曰老女人黄片| 国产淫语在线视频| 你懂的网址亚洲精品在线观看| 少妇丰满av| 亚洲av电影在线观看一区二区三区| av女优亚洲男人天堂| 91成人精品电影| 肉色欧美久久久久久久蜜桃| www.色视频.com| 成人无遮挡网站| 91精品国产九色| 大香蕉久久网| 久久久久精品久久久久真实原创| 91在线精品国自产拍蜜月| 免费黄色在线免费观看| 91精品一卡2卡3卡4卡| 最近中文字幕2019免费版| 亚洲欧洲国产日韩| 国产免费一区二区三区四区乱码| 啦啦啦啦在线视频资源| 国产色婷婷99| av天堂中文字幕网| 亚洲天堂av无毛| 精品久久国产蜜桃| videossex国产| 久久久久久人妻| 亚洲成色77777| 免费人妻精品一区二区三区视频| 狂野欧美激情性xxxx在线观看| 国内精品宾馆在线| 韩国av在线不卡| 亚洲精品乱码久久久v下载方式| 国产色婷婷99| 亚洲性久久影院| 亚洲欧美一区二区三区黑人 | 精品国产一区二区三区久久久樱花| 婷婷色麻豆天堂久久| 国产精品一区二区在线不卡| 99久国产av精品国产电影| 三上悠亚av全集在线观看 | 久久99蜜桃精品久久| 男女边吃奶边做爰视频| 亚洲欧美日韩另类电影网站| 欧美高清成人免费视频www| 日韩av不卡免费在线播放| 欧美少妇被猛烈插入视频| 青春草国产在线视频| 欧美日本中文国产一区发布| 99热国产这里只有精品6| 好男人视频免费观看在线| 97在线人人人人妻| 亚洲欧美精品自产自拍| 国产精品免费大片| 亚洲欧美中文字幕日韩二区| 人妻 亚洲 视频| 国产精品成人在线| 高清不卡的av网站| 久久久久久久国产电影| 久久鲁丝午夜福利片| 99久久精品热视频| 久久国内精品自在自线图片| 久久精品熟女亚洲av麻豆精品| 日韩欧美 国产精品| 国产亚洲欧美精品永久| 日韩 亚洲 欧美在线| 午夜视频国产福利| 亚洲欧美精品专区久久| 天美传媒精品一区二区| 亚洲人成网站在线播| 成人免费观看视频高清| 九九久久精品国产亚洲av麻豆| 91久久精品国产一区二区成人| 亚洲av成人精品一区久久| 日本黄大片高清| 国产女主播在线喷水免费视频网站| 免费久久久久久久精品成人欧美视频 | 亚洲三级黄色毛片| 日韩欧美 国产精品| 一级毛片久久久久久久久女| 亚洲不卡免费看| 永久网站在线| √禁漫天堂资源中文www| 最近的中文字幕免费完整| 国产精品偷伦视频观看了| 一级片'在线观看视频| 欧美精品亚洲一区二区| 人人妻人人看人人澡| 26uuu在线亚洲综合色| 一区二区三区免费毛片| 又黄又爽又刺激的免费视频.| 亚洲av欧美aⅴ国产| 少妇裸体淫交视频免费看高清| 国产欧美日韩一区二区三区在线 | 国产91av在线免费观看| 一个人看视频在线观看www免费| 日韩不卡一区二区三区视频在线| 性色avwww在线观看| 日韩一区二区视频免费看| 如日韩欧美国产精品一区二区三区 | 精品一区二区三区视频在线| 亚洲精华国产精华液的使用体验| 欧美日韩视频精品一区| 91精品伊人久久大香线蕉| 一个人免费看片子| 免费av不卡在线播放| 啦啦啦在线观看免费高清www| 人妻系列 视频| 国产欧美亚洲国产| 一本色道久久久久久精品综合| 亚洲国产色片| 国产探花极品一区二区| 欧美日韩在线观看h| 大片免费播放器 马上看| av在线老鸭窝| 美女大奶头黄色视频| av天堂久久9| 蜜桃久久精品国产亚洲av| 日本-黄色视频高清免费观看| 欧美少妇被猛烈插入视频| 久久久久久人妻| 插逼视频在线观看| 最近最新中文字幕免费大全7| 少妇 在线观看| 十八禁网站网址无遮挡 | 中文字幕精品免费在线观看视频 | 纵有疾风起免费观看全集完整版| 亚洲精品国产成人久久av| 中文字幕免费在线视频6| 永久网站在线| 亚洲国产精品一区三区| 久久久久久久国产电影| 国产有黄有色有爽视频| 国产精品无大码| 少妇裸体淫交视频免费看高清| 欧美日韩亚洲高清精品| 久久久久久久久久久免费av| 亚洲欧洲精品一区二区精品久久久 | 狂野欧美激情性bbbbbb| 午夜免费观看性视频| 最黄视频免费看| 中文乱码字字幕精品一区二区三区| 在线播放无遮挡| 国产成人免费观看mmmm| 国产精品国产三级国产专区5o| av黄色大香蕉| 国产免费福利视频在线观看| 日韩成人av中文字幕在线观看| 又黄又爽又刺激的免费视频.| 男人舔奶头视频| 在线观看免费高清a一片| 美女xxoo啪啪120秒动态图| 国产爽快片一区二区三区| 欧美xxⅹ黑人| 久久青草综合色| 午夜免费观看性视频| 少妇被粗大猛烈的视频| 国语对白做爰xxxⅹ性视频网站| 久久毛片免费看一区二区三区| 国产一区二区在线观看av| 51国产日韩欧美| 大陆偷拍与自拍| 亚洲情色 制服丝袜| 亚洲精品乱码久久久v下载方式| 日本免费在线观看一区| 日韩av免费高清视频| 国产欧美日韩一区二区三区在线 | 美女视频免费永久观看网站| 国产精品.久久久| 九色成人免费人妻av| 免费黄网站久久成人精品| 亚洲国产精品一区二区三区在线| 日韩成人av中文字幕在线观看| 国产亚洲一区二区精品| 人体艺术视频欧美日本| 成人影院久久| 中文在线观看免费www的网站| 亚洲真实伦在线观看| 成人无遮挡网站| 免费人成在线观看视频色| 日韩中文字幕视频在线看片| 婷婷色av中文字幕| 午夜福利在线观看免费完整高清在| 18禁在线播放成人免费| 欧美一级a爱片免费观看看| 亚洲欧洲国产日韩| 午夜激情福利司机影院| 欧美日韩综合久久久久久| 午夜免费鲁丝| 一级爰片在线观看| 欧美日韩视频精品一区| 夜夜骑夜夜射夜夜干| 亚洲无线观看免费| av又黄又爽大尺度在线免费看| 晚上一个人看的免费电影| 久久国产精品大桥未久av | av国产久精品久网站免费入址| 中文资源天堂在线| 菩萨蛮人人尽说江南好唐韦庄| 一级黄片播放器| 夜夜看夜夜爽夜夜摸| 综合色丁香网| 免费人成在线观看视频色| 亚洲怡红院男人天堂| 久久精品国产亚洲网站| 最近中文字幕2019免费版| 久久综合国产亚洲精品| 亚洲国产成人一精品久久久| 欧美+日韩+精品| 国产欧美另类精品又又久久亚洲欧美| 黄色视频在线播放观看不卡| 成人免费观看视频高清| 亚洲av福利一区| 亚洲国产成人一精品久久久| 欧美精品人与动牲交sv欧美| 精品国产国语对白av| 国产探花极品一区二区| 亚洲内射少妇av| 精品99又大又爽又粗少妇毛片| 男人舔奶头视频| 美女cb高潮喷水在线观看| 亚洲国产日韩一区二区| 丰满人妻一区二区三区视频av| 久久精品久久久久久久性| 成人毛片60女人毛片免费| 高清不卡的av网站| 欧美老熟妇乱子伦牲交| 色婷婷av一区二区三区视频| 另类精品久久| 亚洲精品自拍成人| 亚洲,一卡二卡三卡| 免费少妇av软件| av免费观看日本| 韩国av在线不卡| 高清午夜精品一区二区三区| 国产成人a∨麻豆精品| 国产在线男女| 国产精品国产三级专区第一集| 最近中文字幕高清免费大全6| 精品人妻一区二区三区麻豆| 哪个播放器可以免费观看大片| 99热6这里只有精品| 久久久午夜欧美精品| 久久99热6这里只有精品| 亚洲天堂av无毛| 青春草国产在线视频| 日韩av在线免费看完整版不卡| 99久国产av精品国产电影| 看免费成人av毛片| 亚洲欧洲精品一区二区精品久久久 | 不卡视频在线观看欧美| 成人黄色视频免费在线看| 欧美日韩国产mv在线观看视频| 十八禁网站网址无遮挡 | 国产精品99久久99久久久不卡 | 国产白丝娇喘喷水9色精品| 狂野欧美激情性xxxx在线观看| 超碰97精品在线观看| 天堂中文最新版在线下载| 亚洲欧洲精品一区二区精品久久久 | 国产成人aa在线观看| 国产av码专区亚洲av| 插阴视频在线观看视频| 五月开心婷婷网| 好男人视频免费观看在线| 国产欧美亚洲国产| 卡戴珊不雅视频在线播放| 亚洲久久久国产精品| 中国国产av一级| 久热这里只有精品99| 精品午夜福利在线看| 人妻 亚洲 视频| 一级片'在线观看视频| 新久久久久国产一级毛片| 成人国产麻豆网| 一个人免费看片子| 26uuu在线亚洲综合色| 丰满饥渴人妻一区二区三| 久久免费观看电影| 国产精品久久久久久av不卡| 国产精品熟女久久久久浪| 国产成人精品无人区| 最近手机中文字幕大全| 成年美女黄网站色视频大全免费 | 国产亚洲一区二区精品| 婷婷色综合大香蕉| 亚洲国产欧美日韩在线播放 | 久久青草综合色| 黄色一级大片看看| 最近中文字幕高清免费大全6| 欧美人与善性xxx| 少妇裸体淫交视频免费看高清| 国产精品.久久久| 免费观看无遮挡的男女| 亚洲在久久综合| 偷拍熟女少妇极品色| 大香蕉久久网| 国精品久久久久久国模美|