• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    軟件質(zhì)量保證應(yīng)用軟件自動(dòng)化技術(shù)研究

    2022-05-10 19:18:06楊勛姮段明璐
    軟件工程 2022年5期
    關(guān)鍵詞:質(zhì)量管理體系質(zhì)量保證

    楊勛姮 段明璐

    摘? 要:針對(duì)軟件質(zhì)量保證(Software Quality Assurance, SQA)技術(shù)在實(shí)際應(yīng)用過程中任務(wù)量大、方法效率低下、容易受主觀判斷干擾等問題,探討了質(zhì)量管理體系(Quality Management System, QMS)和能力成熟度模型集成(Capability Maturity Model Integration, CMMI)的概念,對(duì)軟件質(zhì)量保證技術(shù)進(jìn)行研究,包括傳統(tǒng)的軟件質(zhì)量保證技術(shù)PDCA循環(huán)以及七種統(tǒng)計(jì)技術(shù);設(shè)計(jì)了輔助實(shí)施質(zhì)量保證(Quality Assurance)的自動(dòng)化軟件管理工具,分析了軟件質(zhì)量保證應(yīng)用的現(xiàn)狀,總結(jié)了質(zhì)量管理工具的應(yīng)用要點(diǎn)。結(jié)果表明,質(zhì)量保證自動(dòng)化技術(shù)的應(yīng)用研究對(duì)改善軟件質(zhì)量、提高工作效率具有實(shí)踐價(jià)值。

    關(guān)鍵詞:質(zhì)量保證;質(zhì)量管理體系;軟件質(zhì)量管理工具

    中圖分類號(hào):TP311.56? ? ?文獻(xiàn)標(biāo)識(shí)碼:A

    Research on Automation Technology of Software Quality Assurance Application

    YANG Xunheng, DUAN Minglu

    (Department of Software Testing Center, the 15th Research Institute of?China Electronics Technology Group Corporation, Beijing 100083, China)

    Abstract: In the application of Software Quality Assurance (SQA) technology, there are problems of large numbers of tasks, low efficiency and being easily disturbed by subjective judgment. This paper proposes to discuss the concept of Quality Management System (QMS) and Capability Maturity Model Integration (CMMI), and do research on Software Quality Assurance technology which includes typical Software Quality Assurance technology PDCA Cycle and seven statistical techniques. Automated software management tools are designed to assist in implementing Quality Assurance (QA). Finally, the application status of Software Quality Assurance is analyzed, and the application points of quality management tools are summarized. Experiment results show that the application research of quality assurance automation technology has practical value to improve software quality and work efficiency.

    Keywords: quality assurance; quality management system; software quality management tools

    1? ?引言(Introduction)

    計(jì)算機(jī)技術(shù)的迅猛發(fā)展促進(jìn)了計(jì)算機(jī)應(yīng)用的日新月異,尤其在武器裝備系統(tǒng)中,軟件所占比重逐年提高,因此對(duì)軟件程序的質(zhì)量提出了更高的要求。美國政府機(jī)關(guān)的數(shù)據(jù)曾顯示,美國每年由于軟件質(zhì)量問題造成的經(jīng)濟(jì)損失高達(dá)600億美元。

    近十年來,基于CMMI的軟件工程化被廣泛應(yīng)用于中國各大企事業(yè)單位。實(shí)施CMMI的本質(zhì)是幫助組織有效地改善軟件工程管理的核心問題,進(jìn)而提高軟件質(zhì)量[1]。軟件質(zhì)量保證作為確保軟件項(xiàng)目管理實(shí)施規(guī)范化的一種技術(shù),其監(jiān)督對(duì)象是在組織級(jí)定義的項(xiàng)目層面的過程活動(dòng)和工作產(chǎn)品。

    本文明確了質(zhì)量保證在質(zhì)量管理中的作用,探討了依據(jù)國際標(biāo)準(zhǔn)和軍用標(biāo)準(zhǔn)建立質(zhì)量管理體系中的軟件質(zhì)量保證的實(shí)施過程及技術(shù)方法,以及在運(yùn)用軟件質(zhì)量保證進(jìn)行項(xiàng)目監(jiān)督評(píng)價(jià)時(shí)所使用的自動(dòng)化管理工具的設(shè)計(jì)實(shí)現(xiàn)。

    2? 軟件質(zhì)量保證的相關(guān)概念(Related concepts of SQA)

    任何組織都需要管理,當(dāng)管理的對(duì)象是產(chǎn)品的質(zhì)量時(shí),則為質(zhì)量管理。質(zhì)量管理是關(guān)于質(zhì)量的一切管理活動(dòng),例如確定質(zhì)量方針、質(zhì)量目標(biāo),建立質(zhì)量管理體系,具體包括質(zhì)量策劃、質(zhì)量控制、質(zhì)量保證和質(zhì)量改進(jìn)。20 世紀(jì)60 年代初,美國的A.V.費(fèi)根鮑姆提出了全面質(zhì)量管理TQM(Total Quality Management)的概念,將企業(yè)各部門在研制質(zhì)量、維持質(zhì)量和提高質(zhì)量方面的活動(dòng)構(gòu)成一種有效體系。中國自20 世紀(jì)70 年代末開始推行全面質(zhì)量管理,并取得了一定成效。

    國際標(biāo)準(zhǔn)和國家標(biāo)準(zhǔn)對(duì)質(zhì)量管理是這樣定義的:質(zhì)量管理是在質(zhì)量方面指揮和控制組織的協(xié)調(diào)活動(dòng)?!堆b備質(zhì)量管理術(shù)語》(GJB 1405A—2006)中規(guī)定了裝備科研生產(chǎn)使用中涉及的裝備質(zhì)量管理術(shù)語[2]。

    質(zhì)量管理體系作為在質(zhì)量方面指揮和控制組織的管理體系,是組織內(nèi)部建立的、系統(tǒng)的質(zhì)量管理模式,為實(shí)現(xiàn)質(zhì)量目標(biāo),將資源與過程管理方法相結(jié)合,涵蓋了確定需求、生產(chǎn)研制、檢驗(yàn)交付等全過程的策劃、實(shí)施、監(jiān)控與改進(jìn)活動(dòng)。質(zhì)量保證是質(zhì)量管理的一部分,按照質(zhì)量管理體系的規(guī)定實(shí)施有計(jì)劃的系統(tǒng)活動(dòng),以保證產(chǎn)品質(zhì)量為基礎(chǔ),使用戶確信產(chǎn)品或服務(wù)滿足規(guī)定的質(zhì)量要求,致力于獲得用戶的信任。

    2.1? ?質(zhì)量管理體系的概念

    20 世紀(jì)60 年代,美軍制定了MIL-Q-8958A等系列軍用質(zhì)量管理標(biāo)準(zhǔn),在標(biāo)準(zhǔn)MIL-Q-9858A中提出了“質(zhì)量保證”的概念。20 世紀(jì)70 年代末,英國將軍方在制定合同時(shí)使用的質(zhì)量保證方法引入市場環(huán)境,制定了英國國家質(zhì)量管理標(biāo)準(zhǔn)BS 5750。20 世紀(jì)80 年代末,國際標(biāo)準(zhǔn)化組織制定的國際質(zhì)量管理標(biāo)準(zhǔn)ISO 9000系列開始在世界范圍內(nèi)推行質(zhì)量管理與質(zhì)量保證,該系列標(biāo)準(zhǔn)適用于不同類型產(chǎn)品與性質(zhì)的組織。

    質(zhì)量保證在ISO 9000:2005中被定義為質(zhì)量管理的一部分,目的在于通過進(jìn)行嚴(yán)格的試驗(yàn)來獲取顧客信任,滿足最終顧客使用的環(huán)境、壽命以及產(chǎn)品的相關(guān)標(biāo)準(zhǔn)要求。質(zhì)量保證關(guān)注的是與質(zhì)量活動(dòng)相關(guān)的政策、制度、流程、規(guī)范,通過質(zhì)量保證人員在軟件全生命周期的質(zhì)量評(píng)價(jià)活動(dòng),確保軟件項(xiàng)目的實(shí)施符合相關(guān)標(biāo)準(zhǔn)、制度和規(guī)范。

    20 世紀(jì)80 年代,美國卡耐基梅隆大學(xué)軟件工程研究所(Software Engineering Institute,SEI)組織軟件管理方面的專家研發(fā)了一種軟件能力成熟度評(píng)估標(biāo)準(zhǔn)CMM(Capability Maturity Model),用于指導(dǎo)軟件開發(fā)過程的改進(jìn)和軟件開發(fā)能力的評(píng)估。CMMI是CMM模型的更新版本。2018 年,CMMI研究院正式發(fā)布了CMMI 2.0中文版,該版本是針對(duì)軟件、產(chǎn)品和系統(tǒng)的優(yōu)良實(shí)踐發(fā)布的過程改進(jìn)模型,致力于利用當(dāng)前的優(yōu)良實(shí)踐,改善業(yè)務(wù)績效,以業(yè)務(wù)績效為焦點(diǎn),為使用Scrum的敏捷項(xiàng)目過程提供直接指導(dǎo)。中國人民解放軍總裝備部參考CMMI最新版本也開始進(jìn)行GJB 5000A的改版工作,并將在2022 年底完成軍工企事業(yè)單位依據(jù)GJB 5000B的體系換版工作。

    CMMI為組織提供了一個(gè)單一的集成框架,一共包括五個(gè)級(jí)別,不同的級(jí)別包含的過程域也不盡相同。所有過程域分為四大類:過程管理類、項(xiàng)目管理類、工程管理類、支持管理類。支持管理類中包含“過程與產(chǎn)品質(zhì)量保證”過程域,該過程域?yàn)轫?xiàng)目管理層提供了項(xiàng)目過程和相關(guān)工作產(chǎn)品的客觀信息,如圖1所示。

    軟件質(zhì)量保證屬于支持管理類過程域中的過程和產(chǎn)品質(zhì)量保證,用以在項(xiàng)目整個(gè)生命周期提供對(duì)所有過程域中所描述的過程和工作產(chǎn)品的客觀評(píng)價(jià),并確保這些評(píng)價(jià)提出的所有問題得到解決,從而確保交付高質(zhì)量的產(chǎn)品和服務(wù)。

    2.2? ?軟件質(zhì)量保證的應(yīng)用現(xiàn)狀

    隨著移動(dòng)互聯(lián)網(wǎng)的蓬勃發(fā)展以及云計(jì)算、大數(shù)據(jù)技術(shù)的更新?lián)Q代,軟件開發(fā)模式也正在發(fā)生著適應(yīng)性變革。敏捷開發(fā)作為一種靈活的開發(fā)方式正被越來越多的企業(yè)所采納,其面向用戶預(yù)期的迭代開發(fā)方法使軟件從需求分析到設(shè)計(jì)完成的周期變短,更適用于需求變動(dòng)頻繁、快速應(yīng)對(duì)風(fēng)險(xiǎn)、交付周期短的項(xiàng)目。但這種開發(fā)模式也使軟件質(zhì)量管理工作的難度更大,更難以建立行之有效的軟件質(zhì)量管理體系。CMMI 2.0則可以輔助使用諸如Scrum這樣的敏捷模式的企業(yè)更好地實(shí)現(xiàn)其管理價(jià)值,尤其能夠在跨項(xiàng)目的組織層面實(shí)現(xiàn)敏捷的規(guī)?;嵘M織的敏捷開發(fā)能力。

    一個(gè)組織的質(zhì)量管理體系通常是國家標(biāo)準(zhǔn)以及軍用標(biāo)準(zhǔn)的本地化,在遵守法律法規(guī)要求的前提下,所制定規(guī)范的適宜性對(duì)企業(yè)來說至關(guān)重要。而對(duì)于軍用軟件,一個(gè)完備的武器裝備系統(tǒng)可能由多個(gè)承制單位合作研發(fā),項(xiàng)目管理難度普遍較大,而其涉及的軟件質(zhì)量關(guān)系到國家安全,復(fù)雜的管理過程更需要適宜的質(zhì)量保證技術(shù)和高效的軟件管理工具的輔助。

    國家標(biāo)準(zhǔn)要求研制單位必須采用評(píng)審、審計(jì)和測試等具體手段來控制質(zhì)量。在軟件開發(fā)的每個(gè)階段結(jié)束時(shí),都應(yīng)組織正式的技術(shù)評(píng)審,即由軟件技術(shù)人員按照軟件需求規(guī)格說明和設(shè)計(jì)文檔,對(duì)軟件產(chǎn)品進(jìn)行嚴(yán)格的評(píng)審。大多數(shù)情況下,評(píng)審和測試能有效地發(fā)現(xiàn)文檔以及軟件中的缺陷和錯(cuò)誤,但這兩種技術(shù)方法關(guān)注的是產(chǎn)品本身的質(zhì)量,不包括研制過程的質(zhì)量,而軟件質(zhì)量保證則可以通過監(jiān)督技術(shù)評(píng)審等過程的規(guī)范性來保證評(píng)審的有效性。

    軟件質(zhì)量保證的應(yīng)用需要一個(gè)統(tǒng)一的認(rèn)知環(huán)境和價(jià)值觀,對(duì)于企業(yè)來說,適宜有效的質(zhì)量管理體系下的軟件質(zhì)量保證活動(dòng)可以發(fā)揮杠桿作用,幫助軟件研發(fā)工作提高協(xié)調(diào)性,提高生產(chǎn)率,改善產(chǎn)品質(zhì)量,提升競爭優(yōu)勢。

    3? 軟件質(zhì)量保證的技術(shù)方法(Technical method of SQA)

    軟件質(zhì)量保證是一套有計(jì)劃的、系統(tǒng)的技術(shù)方法,其所制定的標(biāo)準(zhǔn)、步驟、規(guī)程和方法應(yīng)該保證能夠正確地被所有項(xiàng)目所采用。軟件質(zhì)量保證是對(duì)軟件研制過程的一種管理,以獨(dú)立于項(xiàng)目組的角色履行獨(dú)立審查職責(zé)。通過對(duì)軟件產(chǎn)品和過程活動(dòng)的評(píng)審和評(píng)價(jià)來驗(yàn)證軟件研制過程是否正確遵循已制定的計(jì)劃、標(biāo)準(zhǔn)和規(guī)程,同時(shí)為開發(fā)人員和管理層提供反映產(chǎn)品和過程質(zhì)量的信息和數(shù)據(jù),輔助項(xiàng)目取得高質(zhì)量的軟件產(chǎn)品。

    3.1? ?軟件質(zhì)量保證的傳統(tǒng)技術(shù)

    全面質(zhì)量控制(Total Quality Control, TQC)理論起源于美國,20 世紀(jì)60 年代,為了在一定經(jīng)濟(jì)條件下生產(chǎn)盡可能高質(zhì)量的產(chǎn)品,朱蘭、費(fèi)根堡姆提出質(zhì)量活動(dòng)策劃應(yīng)該覆蓋所有職能部門。該理論在發(fā)達(dá)工業(yè)國家開始推行,尤其在日本應(yīng)用廣泛,并于20 世紀(jì)80 年代逐漸發(fā)展為全面質(zhì)量管理的概念。

    全面質(zhì)量管理的基本方法是PDCA(Plan-Do-Check-Act)循環(huán),又稱戴明環(huán)。PDCA循環(huán)將質(zhì)量管理分為四個(gè)階段,即計(jì)劃(Plan)、執(zhí)行(Do)、檢查(Check)、處理(Act)。該工作方法是企業(yè)管理各項(xiàng)活動(dòng)的一般規(guī)律,軟件質(zhì)量保證實(shí)施的一般步驟也基本遵從該管理方法。

    在執(zhí)行和檢查階段,為了更好地分析問題,全面質(zhì)量管理可使用14 種質(zhì)量管理工具。其中,被稱為“老七種”的方法運(yùn)用了統(tǒng)計(jì)技術(shù),包括“因果圖”“流程圖”“直方圖”“檢查單”“散點(diǎn)圖”“排列圖”“控制圖”,這些方法普遍用于質(zhì)量改進(jìn),其概念如下:

    (1)因果圖(Fish Bone Diagram):也稱魚骨圖,它的表示方法與魚骨的形態(tài)類似,魚骨代表問題、缺陷或后果,魚骨上的魚刺代表產(chǎn)生問題可能的原因。因果圖能夠表現(xiàn)各個(gè)原因之間的關(guān)系。在問題處理過程中,可使用因果圖對(duì)產(chǎn)生問題的原因進(jìn)行分析,便于在日后組織層面進(jìn)行過程改進(jìn)時(shí),針對(duì)某類問題制定糾正措施,對(duì)質(zhì)量管理體系的相關(guān)內(nèi)容進(jìn)行改進(jìn)。

    (2)流程圖(Flow Chart):主要描述一個(gè)工作任務(wù)的具體步驟以及輸入輸出,有助于了解任務(wù)的運(yùn)行結(jié)構(gòu)并用于跟蹤。

    (3)直方圖(Histogram):用于表示某類事物測量結(jié)果的實(shí)際分布,可通過圖形的分布形狀判斷事物的整體情況。直方圖可用于呈現(xiàn)里程碑節(jié)點(diǎn)處一段時(shí)間內(nèi)問題的處理情況,使質(zhì)量管理人員直觀清晰地了解項(xiàng)目現(xiàn)階段的整體情況,預(yù)測未來的質(zhì)量趨勢。

    (4)檢查單(Checklist):是預(yù)先準(zhǔn)備用于記錄目標(biāo)對(duì)象行為特征的表格,表格中按行描述特定的“行”為特征,并在每個(gè)行為特征后設(shè)置描述符合性的“列”,通??捎妙A(yù)置的值表示,如“是”“否”或“不適用”,抑或描述整體情況的“好”“中”“差”[3]。檢查單是軟件質(zhì)量保證人員實(shí)施評(píng)價(jià)所使用的主要技術(shù)方法,不同的軟件工作產(chǎn)品應(yīng)使用組織檢查單匯總表中相應(yīng)的檢查單,且可對(duì)具體的檢查內(nèi)容進(jìn)行裁減。

    (5)散點(diǎn)圖(Scatter Plot):圖形表示為數(shù)據(jù)點(diǎn)在直角坐標(biāo)系上的分布,可用于觀察隨自變量變化的因變量的趨勢,數(shù)據(jù)點(diǎn)可以是科學(xué)數(shù)據(jù)、統(tǒng)計(jì)數(shù)據(jù)或工程數(shù)據(jù),主要用于回歸分析。

    (6)排列圖(Pareto Chart):也稱帕累托圖,用于統(tǒng)計(jì)和顯示一定時(shí)間內(nèi)各種類型缺陷或問題的數(shù)目,有助于確定造成大多數(shù)問題的關(guān)鍵原因,也可以用于分析生產(chǎn)過程中最可能產(chǎn)生某些缺陷的部分。

    (7)控制圖(Control Chart):是用于分析和判斷過程是否處于穩(wěn)定狀態(tài)所使用的帶有控制界限的圖,可區(qū)分正常波動(dòng)和異常波動(dòng),是對(duì)過程質(zhì)量特性進(jìn)行測定、記錄、評(píng)估,從而監(jiān)察過程是否處于控制狀態(tài)的一種圖[4]。

    3.2? ?軟件質(zhì)量保證的實(shí)施過程

    軟件質(zhì)量保證人員在項(xiàng)目一開始時(shí)就應(yīng)該與軟件項(xiàng)目經(jīng)理共同建立計(jì)劃、標(biāo)準(zhǔn)和過程。軟件質(zhì)量保證人員的工作貫穿于整個(gè)軟件生命周期的全過程活動(dòng)中,關(guān)注過程和中間產(chǎn)品,而不僅僅是最終產(chǎn)品[5]。軟件質(zhì)量保證實(shí)施的一般步驟為:

    (1)設(shè)定質(zhì)量目標(biāo)。根據(jù)組織質(zhì)量管理體系中規(guī)定的項(xiàng)目層面的質(zhì)量目標(biāo),以項(xiàng)目需求和開發(fā)任務(wù)為依據(jù),制定本項(xiàng)目有關(guān)活動(dòng)的質(zhì)量準(zhǔn)則,為實(shí)施評(píng)價(jià)設(shè)定依據(jù)的質(zhì)量目標(biāo)。

    (2)制定質(zhì)量保證計(jì)劃(Quality Assurance Plan),又稱質(zhì)量保證大綱(Quality Assurance Program)。質(zhì)量保證計(jì)劃通常是質(zhì)量策劃的結(jié)果之一,它規(guī)定了特定項(xiàng)目中的產(chǎn)品和過程,以及使用相關(guān)程序和文件資料的人員和時(shí)機(jī),通常包括以下內(nèi)容:

    ①支持軟件項(xiàng)目質(zhì)量保證工作的軟硬件環(huán)境、人員等資源,包括實(shí)施評(píng)價(jià)使用的輔助軟件管理工具。

    ②明確質(zhì)量保證評(píng)價(jià)所采用的技術(shù)方法,根據(jù)項(xiàng)目的具體活動(dòng)裁減或細(xì)化過程活動(dòng)和工作產(chǎn)品檢查單,根據(jù)抽檢原則確定抽檢頻次、時(shí)機(jī)和覆蓋率。

    ③依據(jù)軟件開發(fā)計(jì)劃制定過程活動(dòng)和工作產(chǎn)品檢查計(jì)劃,如表1所示,可在計(jì)劃中確定評(píng)價(jià)的內(nèi)容、時(shí)機(jī)和使用的檢查單。

    ④識(shí)別項(xiàng)目利益相關(guān)方,描述問題的上報(bào)解決渠道。

    (3)實(shí)施質(zhì)量評(píng)價(jià)。在質(zhì)量管理體系的質(zhì)量保證程序和質(zhì)量評(píng)價(jià)準(zhǔn)則的指導(dǎo)下,依據(jù)質(zhì)量保證計(jì)劃中規(guī)定的時(shí)間節(jié)點(diǎn),使用相應(yīng)的檢查單對(duì)定義的工作產(chǎn)品和過程進(jìn)行評(píng)價(jià),并記錄不符合項(xiàng),確定修改人員與預(yù)期修改時(shí)間。按階段統(tǒng)計(jì)質(zhì)量保證活動(dòng)情況,對(duì)質(zhì)量問題進(jìn)行趨勢分析,并生成階段性報(bào)告,定期將階段總體情況通報(bào)給項(xiàng)目組相關(guān)成員和質(zhì)量管理人員。

    (4)質(zhì)量問題處理。與質(zhì)量保證評(píng)價(jià)問題的相關(guān)負(fù)責(zé)人進(jìn)行溝通確認(rèn),在預(yù)期修改的時(shí)間段內(nèi)對(duì)問題進(jìn)行跟蹤驗(yàn)證;對(duì)于有爭議的問題,按照組織建立的上報(bào)機(jī)制,采取逐級(jí)上報(bào)的方式,力求問題最終得到妥善處理。

    (5)過程改進(jìn)。在組織質(zhì)量管理體系層面,綜合考慮評(píng)價(jià)過程中發(fā)現(xiàn)的問題,對(duì)過程和產(chǎn)品質(zhì)量保證進(jìn)行改進(jìn),包括對(duì)評(píng)價(jià)所使用檢查單的制定和修訂等。組織可指定軟件質(zhì)量主管對(duì)軟件質(zhì)量保證人員的工作情況進(jìn)行定期審核,并記錄糾正審核發(fā)現(xiàn)的問題,確保軟件質(zhì)量保證人員評(píng)價(jià)的客觀性與符合性[6]。

    4? 軟件質(zhì)量管理工具(The management tools of software quality)

    現(xiàn)階段市場上有許多項(xiàng)目管理工具提供軟件工程方面的支持,輔助企業(yè)進(jìn)行項(xiàng)目管理。這類工具軟件的功能類別涵蓋了軟件整個(gè)生命周期的過程活動(dòng),從研制開發(fā)、測試分析到售后服務(wù)都有所涉及,有的甚至為軟件需求分析人員、設(shè)計(jì)人員、測試人員等各類角色提供了一個(gè)系統(tǒng)化的平臺(tái)[7-8]。

    對(duì)于輔助完成軟件質(zhì)量保證工作的軟件質(zhì)量管理工具,其功能一般不僅包含質(zhì)量保證過程的管理,還包括軟件測試、評(píng)審等子功能,乃至對(duì)整個(gè)軟件項(xiàng)目的策劃、監(jiān)控、風(fēng)險(xiǎn)管理、需求管理、配置管理等。

    4.1? ?軟件質(zhì)量保證功能分析

    軟件質(zhì)量保證人員按照檢查單的檢查項(xiàng)進(jìn)行過程活動(dòng)和產(chǎn)品的評(píng)價(jià),對(duì)檢查項(xiàng)的理解不可避免地會(huì)受主觀因素的影響。為減少由于主觀判斷造成質(zhì)量評(píng)價(jià)的偏差,同時(shí)提高項(xiàng)目評(píng)價(jià)效率,在使用質(zhì)量管理工具進(jìn)行輔助評(píng)價(jià)時(shí),應(yīng)盡可能地將軟件質(zhì)量保證的檢查項(xiàng)中可借助程序自動(dòng)評(píng)價(jià)的部分識(shí)別出來,在軟件質(zhì)量保證功能定制開發(fā)時(shí)實(shí)現(xiàn)評(píng)價(jià)的自動(dòng)化,并根據(jù)需要不斷完善項(xiàng)目管理工具輔助質(zhì)量檢查的功能。

    以使用自研的軟件項(xiàng)目管理工具為例,其功能模塊包括項(xiàng)目策劃、項(xiàng)目跟蹤、質(zhì)量保證、需求管理、配置管理、風(fēng)險(xiǎn)管理和評(píng)審。其中,軟件質(zhì)量保證依據(jù)3.2部分中軟件質(zhì)量保證實(shí)施的一般步驟,對(duì)軟件將要實(shí)現(xiàn)的功能分析如下:

    (1)維護(hù)質(zhì)量計(jì)劃:該功能是依據(jù)軟件開發(fā)計(jì)劃中的時(shí)間節(jié)點(diǎn)對(duì)待評(píng)價(jià)的過程活動(dòng)和工作產(chǎn)品制定進(jìn)度計(jì)劃。開發(fā)計(jì)劃中的時(shí)間節(jié)點(diǎn)在進(jìn)度計(jì)劃中描述,在管理工具中應(yīng)事先在相應(yīng)模塊對(duì)其進(jìn)行維護(hù),程序可以根據(jù)進(jìn)度計(jì)劃評(píng)審任務(wù)的WBS節(jié)點(diǎn)的時(shí)間生成相應(yīng)的過程活動(dòng)評(píng)價(jià)計(jì)劃和工作產(chǎn)品評(píng)價(jià)計(jì)劃。

    (2)管理檢查單:該功能用于編制組織質(zhì)量管理體系層面的檢查表單,描述所有過程和活動(dòng)檢查單包含的檢查項(xiàng),以檢查條目的方式進(jìn)行存儲(chǔ),包括組織已識(shí)別為可進(jìn)行程序自動(dòng)評(píng)價(jià)的檢查項(xiàng)。

    (3)實(shí)施質(zhì)量評(píng)價(jià):按質(zhì)量保證計(jì)劃中的時(shí)間節(jié)點(diǎn),對(duì)項(xiàng)目的過程活動(dòng)和工作產(chǎn)品進(jìn)行評(píng)價(jià),使用相應(yīng)的檢查單記錄評(píng)價(jià)情況,將與檢查項(xiàng)不相符的問題描述為不符合項(xiàng),并確定問題修改人員和預(yù)期修改時(shí)間。對(duì)于包含程序自評(píng)價(jià)檢查項(xiàng)的檢查單,軟件質(zhì)量保證人員可以對(duì)自評(píng)價(jià)的結(jié)果進(jìn)行修改,或直接將描述問題的評(píng)價(jià)結(jié)果生成質(zhì)量問題。

    (4)處理質(zhì)量問題:對(duì)評(píng)價(jià)過程中產(chǎn)生的不符合項(xiàng)進(jìn)行跟蹤處理,確認(rèn)問題的當(dāng)前狀態(tài),記錄問題的處置情況,在預(yù)期修改時(shí)間內(nèi)回歸問題,直至問題關(guān)閉。

    綜上分析,為實(shí)現(xiàn)質(zhì)量保證評(píng)價(jià)的自動(dòng)化,重點(diǎn)應(yīng)關(guān)注檢查單管理、質(zhì)量評(píng)價(jià)實(shí)施模塊的功能實(shí)現(xiàn),結(jié)合企業(yè)項(xiàng)目特點(diǎn),根據(jù)項(xiàng)目管理軟件提供的功能,前期對(duì)各類檢查單的檢查項(xiàng)進(jìn)行梳理和識(shí)別。軟件質(zhì)量保證的主要功能如圖2所示。

    為了從使用角色的角度更直觀地分析功能用例,使用用例圖描述項(xiàng)目角色的工作內(nèi)容,初步定義功能需求。以“維護(hù)質(zhì)量計(jì)劃”子功能為例,項(xiàng)目角色軟件質(zhì)量保證人員的用例功能如圖3所示。

    由圖3可知,軟件質(zhì)量保證人員在維護(hù)質(zhì)量計(jì)劃基本信息時(shí)可以完成添加、修改和刪除過程活動(dòng)及工作產(chǎn)品信息的功能。為進(jìn)一步分析功能所包含的使用前提、場景以及正常、異常操作,可將功能整理為用例建模,描述更為詳細(xì)的信息項(xiàng)和操作步驟。

    4.2? ?軟件質(zhì)量保證功能的設(shè)計(jì)實(shí)現(xiàn)

    在功能需求明確后,應(yīng)考慮軟件架構(gòu)設(shè)計(jì),確定開發(fā)平臺(tái)、使用語言、數(shù)據(jù)庫,并進(jìn)行界面設(shè)計(jì)和數(shù)據(jù)庫的表設(shè)計(jì)。將滿足功能需求的信息項(xiàng)抽象為數(shù)據(jù)庫表,以表為單位來存儲(chǔ)功能信息項(xiàng)邏輯字段,并預(yù)留支撐軟件運(yùn)行的系統(tǒng)信息字段。根據(jù)設(shè)計(jì)合理表關(guān)聯(lián)的原則,盡量降低表之間的直接耦合度,表之間的內(nèi)在關(guān)系也是程序中子功能關(guān)系的體現(xiàn)。以管理檢查單功能為例,所管理的檢查單分為自定義檢查單和自評(píng)價(jià)檢查單兩類。如表2所示,表中定義了檢查單管理模塊各個(gè)顯示字段的名稱、標(biāo)識(shí),數(shù)據(jù)庫中存儲(chǔ)字段的數(shù)據(jù)類型和屬性,以及界面所使用的控件。

    程序界面示意圖如圖4所示,當(dāng)需要根據(jù)項(xiàng)目情況自定義某個(gè)檢查單的檢查項(xiàng)時(shí),選擇進(jìn)入管理檢查單頁面,界面顯示出項(xiàng)目名稱和檢查單名稱,可以維護(hù)檢查單的相關(guān)信息,并在列表中對(duì)檢查項(xiàng)進(jìn)行增刪改查。

    軟件質(zhì)量保證人員對(duì)項(xiàng)目跟蹤情況例行檢查時(shí),對(duì)于項(xiàng)目監(jiān)控過程檢查單的部分檢查項(xiàng)可采取程序自動(dòng)判斷的方式進(jìn)行檢查。例如,判斷項(xiàng)目組每周是否跟蹤了任務(wù)的進(jìn)度和工作量,這條檢查項(xiàng)可通過檢索數(shù)據(jù)庫中項(xiàng)目跟蹤功能對(duì)應(yīng)表單是否存在待檢查時(shí)間段內(nèi)的記錄進(jìn)行判斷,諸如此類的檢查項(xiàng)都可以梳理為程序自動(dòng)檢查的評(píng)價(jià)內(nèi)容。

    4.3? ?軟件質(zhì)量保證自動(dòng)化評(píng)價(jià)效率分析

    以項(xiàng)目監(jiān)控過程為例,每周監(jiān)控內(nèi)容的例行檢查項(xiàng)約有30 條,每條檢查項(xiàng)人工檢查需要平均耗時(shí)3 分鐘,也就是說單個(gè)項(xiàng)目的單個(gè)過程檢查單的耗時(shí)為1.5 小時(shí)。而這樣的檢查單還包括需求管理過程、配置管理過程、評(píng)審過程等近10 個(gè)檢查單。假設(shè)每周將10 個(gè)檢查單的內(nèi)容通過人工平均實(shí)現(xiàn),需要15 個(gè)小時(shí)。以一個(gè)軟件質(zhì)量保證人員同一時(shí)期平均管理的項(xiàng)目數(shù)為4 個(gè)計(jì)算,每天8 個(gè)工時(shí)的情況下,需要7.5 個(gè)工作日才能完成項(xiàng)目的評(píng)價(jià)。

    而根據(jù)輔助工具中其他管理模塊的關(guān)聯(lián)進(jìn)行自動(dòng)化評(píng)價(jià)的檢查項(xiàng)粗略估計(jì)可以達(dá)到一半甚至以上,因此一個(gè)軟件質(zhì)量保證人員只需要不到4 天就可以完成假設(shè)的工作任務(wù),再加上對(duì)自動(dòng)化評(píng)價(jià)的人為檢查與判斷,一周即可管理至少4 個(gè)項(xiàng)目,工作效率提高了33%。

    質(zhì)量保證管理工具可將功能進(jìn)一步擴(kuò)展為自動(dòng)生成質(zhì)量評(píng)價(jià)問題,并推送給問題責(zé)任人;定期判斷問題修改與否;生成階段性質(zhì)量保證報(bào)告等。自動(dòng)化的評(píng)價(jià)管理將軟件質(zhì)量保證人員從繁重的重復(fù)性勞動(dòng)中解放出來,從而關(guān)注軟件程序不能判斷的、有待人為決策的檢查項(xiàng)。同時(shí),項(xiàng)目質(zhì)量數(shù)據(jù)在軟件中的存儲(chǔ)積累也為組織進(jìn)一步進(jìn)行數(shù)據(jù)分析挖掘提供了基礎(chǔ),從而有利于組織過程的改進(jìn)。

    5? ?結(jié)論(Conclusion)

    本文針對(duì)目前軟件質(zhì)量保證的技術(shù)方法進(jìn)行了研究,重點(diǎn)探討了軟件項(xiàng)目管理工具輔助質(zhì)量保證實(shí)施監(jiān)督的必要性和關(guān)注點(diǎn),通過程序設(shè)計(jì)闡述了質(zhì)量保證實(shí)施自動(dòng)化評(píng)價(jià)的思路和方法。該系統(tǒng)的應(yīng)用有利于減少項(xiàng)目管理受主觀因素影響導(dǎo)致的評(píng)價(jià)結(jié)果不客觀,提高了工作效率和評(píng)價(jià)質(zhì)量。對(duì)企事業(yè)單位實(shí)施軟件質(zhì)量保證以及組織的體系建設(shè)有一定的實(shí)用價(jià)值,同時(shí)對(duì)軟件質(zhì)量的改進(jìn)工作有借鑒作用。

    參考文獻(xiàn)(References)

    [1] 萬融.商品學(xué)概論[M].北京:中國人民大學(xué)出版社,2013:? ? ?155-160.

    [2] 中國人民解放軍總裝備部.裝備質(zhì)量管理術(shù)語:GJB 1405A—2006[S].北京:中國人民解放軍總裝備部軍標(biāo)出版發(fā)行部,2006:3-4.

    [3] 全國信息技術(shù)標(biāo)準(zhǔn)化技術(shù)委員會(huì).系統(tǒng)與軟件工程 系統(tǒng)與軟件質(zhì)量要求和評(píng)價(jià)(SQuaRE)第40部分:評(píng)價(jià)過程:GB/T 25000.40—2018[S].北京:中國標(biāo)準(zhǔn)出版社,2019:9-11.

    [4] 黃小路.藍(lán)領(lǐng)質(zhì)量素質(zhì)提升[M].北京:中國質(zhì)檢出版社,2014:? ? ? 85-121.

    [5] 寧濤,金花.軟件項(xiàng)目管理[M].北京:中國鐵道出版社,2016:? ? ? 54-76.

    [6] 總裝備部電子信息基礎(chǔ)部.軍用軟件研制能力成熟度模型:GJB 5000A—2008[S].北京:中國人民解放軍總裝備部軍標(biāo)出版發(fā)行部,2008:59-64.

    [7] 滕俊元,徐忠賓,高猛.軟件產(chǎn)品化在航天領(lǐng)域的應(yīng)用與管理[J].質(zhì)量與可靠性,2018,193(1):39-41.

    [8] 李軍鋒,顧濱兵,李海浩.軟件測試質(zhì)量評(píng)價(jià)方法[J].計(jì)算機(jī)與現(xiàn)代化,2018,277(9):38-42.

    作者簡介:

    楊勛姮(1985-),女,碩士,高級(jí)工程師.研究領(lǐng)域:質(zhì)量管理,質(zhì)量管理體系應(yīng)用.

    段明璐(1982-),男,碩士,高級(jí)工程師.研究領(lǐng)域:自主可控?cái)?shù)據(jù)庫測試,項(xiàng)目管理.

    猜你喜歡
    質(zhì)量管理體系質(zhì)量保證
    田灣核電站運(yùn)行階段質(zhì)量保證分級(jí)管理
    田灣核電站運(yùn)行階段質(zhì)量保證分級(jí)管理
    焊接技能評(píng)定過程中的質(zhì)量保證要求
    關(guān)于如何做好水質(zhì)環(huán)境監(jiān)測的質(zhì)量保證研究
    淺談輸變電施工企業(yè)質(zhì)量管理體系的發(fā)展
    基于ISO9001:2015質(zhì)量管理體系開放實(shí)驗(yàn)室管理與探索
    質(zhì)量量度在國內(nèi)藥品生產(chǎn)企業(yè)中的應(yīng)用
    船舶行業(yè)質(zhì)量管理信息化平臺(tái)的研究與建設(shè)
    企業(yè)質(zhì)量管理體系有效性研究
    商情(2016年39期)2016-11-21 09:12:17
    軍工企業(yè)實(shí)施質(zhì)量管理體系有效性研究
    国产精品偷伦视频观看了| 女人高潮潮喷娇喘18禁视频| 亚洲中文字幕日韩| 亚洲欧美激情在线| 下体分泌物呈黄色| 又紧又爽又黄一区二区| 欧美日韩精品网址| www日本在线高清视频| 日韩 亚洲 欧美在线| 午夜91福利影院| 午夜福利视频精品| 久久热在线av| 狂野欧美激情性bbbbbb| kizo精华| 久久久亚洲精品成人影院| 色综合欧美亚洲国产小说| 欧美日韩国产mv在线观看视频| 亚洲国产欧美日韩在线播放| 国产又色又爽无遮挡免| 蜜桃在线观看..| 国产真人三级小视频在线观看| 精品亚洲成国产av| 国产福利在线免费观看视频| 一级片'在线观看视频| 无限看片的www在线观看| 91字幕亚洲| 成年人免费黄色播放视频| 亚洲五月婷婷丁香| 国精品久久久久久国模美| 欧美日韩黄片免| 亚洲成人国产一区在线观看 | 一级毛片我不卡| www.自偷自拍.com| 丝袜美腿诱惑在线| 一本—道久久a久久精品蜜桃钙片| 大片免费播放器 马上看| 成年av动漫网址| 国产三级黄色录像| 国产成人免费观看mmmm| av不卡在线播放| 精品亚洲成国产av| 精品福利永久在线观看| 国产视频首页在线观看| 亚洲国产欧美日韩在线播放| 国产在线免费精品| 国产成人一区二区三区免费视频网站 | e午夜精品久久久久久久| 久久国产亚洲av麻豆专区| 国产一级毛片在线| 五月开心婷婷网| 亚洲一卡2卡3卡4卡5卡精品中文| 亚洲国产欧美网| 天天躁夜夜躁狠狠躁躁| 国产在线免费精品| 爱豆传媒免费全集在线观看| 99国产精品一区二区三区| 十八禁高潮呻吟视频| 免费在线观看完整版高清| 久久鲁丝午夜福利片| 嫩草影视91久久| 精品视频人人做人人爽| 国产精品二区激情视频| 尾随美女入室| 十八禁网站网址无遮挡| 五月开心婷婷网| 老鸭窝网址在线观看| av福利片在线| 午夜久久久在线观看| 精品少妇内射三级| 女人爽到高潮嗷嗷叫在线视频| 亚洲欧美日韩另类电影网站| 赤兔流量卡办理| 亚洲av国产av综合av卡| 欧美日韩亚洲国产一区二区在线观看 | 韩国精品一区二区三区| 精品人妻1区二区| 在线观看人妻少妇| 国产成人精品在线电影| av又黄又爽大尺度在线免费看| 午夜福利影视在线免费观看| 国产亚洲av片在线观看秒播厂| 国产av精品麻豆| 99热国产这里只有精品6| 日本av免费视频播放| 国产日韩一区二区三区精品不卡| 晚上一个人看的免费电影| 亚洲精品美女久久av网站| 欧美日韩福利视频一区二区| 人妻人人澡人人爽人人| 精品国产一区二区三区四区第35| 日韩人妻精品一区2区三区| 精品一区在线观看国产| 丰满饥渴人妻一区二区三| 久久av网站| 后天国语完整版免费观看| 亚洲色图综合在线观看| 午夜免费成人在线视频| 国产福利在线免费观看视频| 9色porny在线观看| 美女视频免费永久观看网站| 久久精品人人爽人人爽视色| 午夜激情久久久久久久| 妹子高潮喷水视频| 人体艺术视频欧美日本| av网站在线播放免费| 午夜激情av网站| 亚洲视频免费观看视频| 亚洲色图 男人天堂 中文字幕| 国产99久久九九免费精品| 男人舔女人的私密视频| 男女之事视频高清在线观看 | 嫩草影视91久久| 中文字幕另类日韩欧美亚洲嫩草| 国产一区亚洲一区在线观看| 日韩 亚洲 欧美在线| 尾随美女入室| 七月丁香在线播放| 中文乱码字字幕精品一区二区三区| 亚洲精品久久成人aⅴ小说| 麻豆av在线久日| 丰满迷人的少妇在线观看| 激情视频va一区二区三区| 91精品三级在线观看| 日韩伦理黄色片| 咕卡用的链子| 国产不卡av网站在线观看| 欧美精品一区二区免费开放| 一本大道久久a久久精品| 精品人妻在线不人妻| 成人手机av| 亚洲,一卡二卡三卡| 久久精品国产a三级三级三级| 免费观看人在逋| 亚洲精品国产一区二区精华液| 亚洲欧美日韩另类电影网站| 岛国毛片在线播放| 桃花免费在线播放| 97人妻天天添夜夜摸| 亚洲av美国av| 两人在一起打扑克的视频| 曰老女人黄片| 午夜福利,免费看| 黄色片一级片一级黄色片| 国产在视频线精品| 成年动漫av网址| 日韩大码丰满熟妇| netflix在线观看网站| 亚洲欧美色中文字幕在线| 1024视频免费在线观看| 丁香六月欧美| 久久亚洲精品不卡| 在线观看免费午夜福利视频| 亚洲国产精品成人久久小说| 看十八女毛片水多多多| 久久久精品94久久精品| 人人妻,人人澡人人爽秒播 | 老司机亚洲免费影院| 一区二区日韩欧美中文字幕| 亚洲国产av影院在线观看| 国产老妇伦熟女老妇高清| 熟女av电影| 国产麻豆69| av不卡在线播放| 91麻豆精品激情在线观看国产 | 91精品伊人久久大香线蕉| 欧美精品高潮呻吟av久久| 免费看十八禁软件| av国产久精品久网站免费入址| 免费少妇av软件| 国产黄色免费在线视频| 亚洲欧美一区二区三区久久| 欧美黄色片欧美黄色片| 99久久精品国产亚洲精品| 国产黄色视频一区二区在线观看| 精品人妻熟女毛片av久久网站| 亚洲伊人久久精品综合| 亚洲熟女毛片儿| 久久久国产精品麻豆| 日韩av免费高清视频| 老汉色∧v一级毛片| 天天添夜夜摸| 久久热在线av| 日韩电影二区| 成人黄色视频免费在线看| 日本av手机在线免费观看| 欧美成人午夜精品| 欧美av亚洲av综合av国产av| 亚洲av日韩精品久久久久久密 | 美女福利国产在线| 午夜精品国产一区二区电影| 国产1区2区3区精品| 亚洲图色成人| 国产精品成人在线| 色婷婷久久久亚洲欧美| 久久女婷五月综合色啪小说| 黄片播放在线免费| 久久精品aⅴ一区二区三区四区| 成人手机av| 又黄又粗又硬又大视频| 久久鲁丝午夜福利片| 婷婷丁香在线五月| 人人妻,人人澡人人爽秒播 | 久久人人爽人人片av| 午夜福利免费观看在线| 青春草亚洲视频在线观看| 天天躁夜夜躁狠狠躁躁| 国产女主播在线喷水免费视频网站| 久久久久久久久免费视频了| 国产一级毛片在线| 女人久久www免费人成看片| 免费观看a级毛片全部| 69精品国产乱码久久久| 多毛熟女@视频| 午夜免费鲁丝| 在现免费观看毛片| 亚洲少妇的诱惑av| 国产亚洲欧美在线一区二区| 欧美成狂野欧美在线观看| 久久久久久久久免费视频了| 妹子高潮喷水视频| 精品少妇黑人巨大在线播放| 美女主播在线视频| 亚洲 欧美一区二区三区| 啦啦啦啦在线视频资源| 99国产精品一区二区蜜桃av | 亚洲国产精品一区二区三区在线| 校园人妻丝袜中文字幕| 亚洲图色成人| 免费观看av网站的网址| 日本wwww免费看| 久久 成人 亚洲| 18禁观看日本| 性高湖久久久久久久久免费观看| 日本wwww免费看| 欧美人与性动交α欧美软件| www.av在线官网国产| av网站在线播放免费| 亚洲专区中文字幕在线| 亚洲美女黄色视频免费看| av不卡在线播放| 19禁男女啪啪无遮挡网站| 免费av中文字幕在线| 精品人妻1区二区| 成人手机av| 亚洲午夜精品一区,二区,三区| 女性生殖器流出的白浆| 精品少妇久久久久久888优播| av在线老鸭窝| 菩萨蛮人人尽说江南好唐韦庄| 亚洲五月色婷婷综合| 午夜福利在线免费观看网站| 一级毛片女人18水好多 | 欧美久久黑人一区二区| 波多野结衣av一区二区av| 日本午夜av视频| 少妇 在线观看| 国产精品av久久久久免费| 午夜免费鲁丝| 免费在线观看完整版高清| 大码成人一级视频| 久久人人97超碰香蕉20202| 日本a在线网址| av又黄又爽大尺度在线免费看| 99re6热这里在线精品视频| 免费观看a级毛片全部| 久久99热这里只频精品6学生| 日本五十路高清| 国产成人精品久久久久久| 中文字幕最新亚洲高清| 国产黄色视频一区二区在线观看| 99re6热这里在线精品视频| 日韩一卡2卡3卡4卡2021年| 欧美精品亚洲一区二区| 午夜福利,免费看| 久久久精品国产亚洲av高清涩受| 午夜91福利影院| 国产精品香港三级国产av潘金莲 | 91九色精品人成在线观看| 国产一区有黄有色的免费视频| 亚洲av日韩精品久久久久久密 | 国产免费视频播放在线视频| 国产精品二区激情视频| 欧美久久黑人一区二区| 国产一卡二卡三卡精品| 国产片内射在线| 国产xxxxx性猛交| 精品国产一区二区久久| 女人被躁到高潮嗷嗷叫费观| 后天国语完整版免费观看| 国产黄色视频一区二区在线观看| 精品福利永久在线观看| 久久久久网色| 精品免费久久久久久久清纯 | 一级片免费观看大全| 国产免费一区二区三区四区乱码| 成人免费观看视频高清| 精品少妇久久久久久888优播| 另类亚洲欧美激情| www.精华液| 亚洲国产毛片av蜜桃av| 国产成人免费观看mmmm| 国产爽快片一区二区三区| 欧美日韩成人在线一区二区| 亚洲熟女毛片儿| 男的添女的下面高潮视频| 咕卡用的链子| 亚洲九九香蕉| 最近手机中文字幕大全| 叶爱在线成人免费视频播放| 国语对白做爰xxxⅹ性视频网站| 国产三级黄色录像| 国产成人免费无遮挡视频| 欧美老熟妇乱子伦牲交| 丰满迷人的少妇在线观看| 人妻 亚洲 视频| 狂野欧美激情性xxxx| 亚洲专区中文字幕在线| bbb黄色大片| 超碰97精品在线观看| 亚洲av国产av综合av卡| 国产视频一区二区在线看| 纵有疾风起免费观看全集完整版| 热99国产精品久久久久久7| 成在线人永久免费视频| 好男人视频免费观看在线| www.av在线官网国产| 色视频在线一区二区三区| kizo精华| 精品第一国产精品| 一本一本久久a久久精品综合妖精| 亚洲欧洲日产国产| 亚洲人成网站在线观看播放| 国产高清videossex| 日韩欧美一区视频在线观看| 亚洲国产中文字幕在线视频| 精品视频人人做人人爽| 多毛熟女@视频| 久久精品熟女亚洲av麻豆精品| 两人在一起打扑克的视频| 丝瓜视频免费看黄片| 国产熟女午夜一区二区三区| 国产成人欧美| 久久精品久久久久久噜噜老黄| 美女视频免费永久观看网站| 欧美日韩一级在线毛片| 国产精品国产av在线观看| www.精华液| 精品视频人人做人人爽| 久久久精品94久久精品| 宅男免费午夜| 中国国产av一级| 国产一卡二卡三卡精品| 久久综合国产亚洲精品| 欧美日本中文国产一区发布| 亚洲 欧美一区二区三区| 久久久久精品人妻al黑| 免费一级毛片在线播放高清视频 | 深夜精品福利| xxxhd国产人妻xxx| 视频区欧美日本亚洲| 国产1区2区3区精品| 美女高潮到喷水免费观看| 人人妻人人添人人爽欧美一区卜| 国产91精品成人一区二区三区 | 亚洲精品国产一区二区精华液| 国产xxxxx性猛交| 色综合欧美亚洲国产小说| 欧美在线黄色| 婷婷丁香在线五月| 80岁老熟妇乱子伦牲交| 青春草亚洲视频在线观看| 欧美激情 高清一区二区三区| 青春草亚洲视频在线观看| 黄片小视频在线播放| 在线观看国产h片| 欧美老熟妇乱子伦牲交| 一级毛片女人18水好多 | 老司机亚洲免费影院| 男女免费视频国产| 亚洲欧美精品综合一区二区三区| 久久天躁狠狠躁夜夜2o2o | 欧美日韩一级在线毛片| 亚洲av在线观看美女高潮| 少妇人妻久久综合中文| 无遮挡黄片免费观看| 18禁裸乳无遮挡动漫免费视频| 亚洲国产毛片av蜜桃av| 国产激情久久老熟女| 久热这里只有精品99| 男女国产视频网站| 一本一本久久a久久精品综合妖精| 欧美日韩视频高清一区二区三区二| 亚洲久久久国产精品| 人人妻人人添人人爽欧美一区卜| 亚洲av日韩精品久久久久久密 | 亚洲精品美女久久av网站| 一区二区三区四区激情视频| videosex国产| 欧美乱码精品一区二区三区| 久久精品国产亚洲av高清一级| 美女国产高潮福利片在线看| 最新的欧美精品一区二区| 亚洲中文字幕日韩| 最黄视频免费看| 亚洲av成人不卡在线观看播放网 | 一本大道久久a久久精品| 欧美xxⅹ黑人| 亚洲精品第二区| 成人手机av| 女人被躁到高潮嗷嗷叫费观| 操美女的视频在线观看| 美女午夜性视频免费| 国产成人啪精品午夜网站| 两个人免费观看高清视频| 久久午夜综合久久蜜桃| 国产欧美亚洲国产| 午夜福利影视在线免费观看| 美女大奶头黄色视频| 日韩一区二区三区影片| 免费在线观看黄色视频的| 人人妻,人人澡人人爽秒播 | 新久久久久国产一级毛片| 在线av久久热| 一区二区日韩欧美中文字幕| 亚洲欧美日韩高清在线视频 | 午夜福利,免费看| 亚洲 欧美一区二区三区| 国产成人精品在线电影| 热99国产精品久久久久久7| 一级片免费观看大全| 一区二区三区激情视频| 操出白浆在线播放| 国产一区有黄有色的免费视频| 国产激情久久老熟女| 亚洲成人国产一区在线观看 | 大话2 男鬼变身卡| 麻豆乱淫一区二区| 久久精品久久久久久噜噜老黄| 男女午夜视频在线观看| 婷婷丁香在线五月| 国产91精品成人一区二区三区 | 中国国产av一级| 捣出白浆h1v1| 一本久久精品| 欧美精品一区二区大全| 国产无遮挡羞羞视频在线观看| 女警被强在线播放| 天天影视国产精品| 国产高清videossex| 久久久久精品人妻al黑| 女人爽到高潮嗷嗷叫在线视频| 一级毛片黄色毛片免费观看视频| 女性生殖器流出的白浆| 亚洲精品国产色婷婷电影| 飞空精品影院首页| 麻豆av在线久日| 高清欧美精品videossex| 五月开心婷婷网| 校园人妻丝袜中文字幕| 熟女av电影| 欧美精品av麻豆av| 美女午夜性视频免费| 成人影院久久| 看免费成人av毛片| 中文字幕精品免费在线观看视频| 婷婷色麻豆天堂久久| 中文字幕亚洲精品专区| 精品欧美一区二区三区在线| 亚洲国产精品999| 精品少妇内射三级| 男的添女的下面高潮视频| 一级黄色大片毛片| a级毛片在线看网站| 中文字幕最新亚洲高清| 亚洲一区中文字幕在线| 欧美日本中文国产一区发布| 国产极品粉嫩免费观看在线| 亚洲综合色网址| 午夜福利视频在线观看免费| av福利片在线| 丰满饥渴人妻一区二区三| 视频在线观看一区二区三区| a级毛片黄视频| 中文字幕人妻丝袜制服| 久久精品国产综合久久久| 色94色欧美一区二区| 精品高清国产在线一区| 亚洲七黄色美女视频| 麻豆乱淫一区二区| 日韩制服骚丝袜av| 80岁老熟妇乱子伦牲交| 国产免费视频播放在线视频| 纵有疾风起免费观看全集完整版| 丝袜在线中文字幕| 首页视频小说图片口味搜索 | 久久久国产一区二区| 男女床上黄色一级片免费看| 精品国产国语对白av| 亚洲国产欧美一区二区综合| 狠狠精品人妻久久久久久综合| 777米奇影视久久| 国产91精品成人一区二区三区 | 青青草视频在线视频观看| 成在线人永久免费视频| 久久人人爽人人片av| 久久这里只有精品19| 日韩欧美一区视频在线观看| 国产免费视频播放在线视频| 伊人亚洲综合成人网| 欧美 日韩 精品 国产| xxx大片免费视频| 亚洲久久久国产精品| 又黄又粗又硬又大视频| 91国产中文字幕| 国产野战对白在线观看| 一级毛片电影观看| 国产成人精品在线电影| 少妇 在线观看| 一区二区av电影网| 50天的宝宝边吃奶边哭怎么回事| 国产精品九九99| 国产精品熟女久久久久浪| 青草久久国产| 亚洲欧美色中文字幕在线| 人人澡人人妻人| 久久人妻福利社区极品人妻图片 | 国产一区二区在线观看av| 久久亚洲精品不卡| 男男h啪啪无遮挡| 日韩av不卡免费在线播放| 999久久久国产精品视频| 国产亚洲欧美精品永久| 啦啦啦 在线观看视频| www日本在线高清视频| 一区在线观看完整版| 欧美在线黄色| 日日摸夜夜添夜夜爱| 免费女性裸体啪啪无遮挡网站| 妹子高潮喷水视频| 自拍欧美九色日韩亚洲蝌蚪91| 捣出白浆h1v1| 国产精品久久久久久精品电影小说| 欧美日韩一级在线毛片| 一区二区日韩欧美中文字幕| 色播在线永久视频| 欧美日韩成人在线一区二区| tube8黄色片| 亚洲欧美日韩高清在线视频 | 成在线人永久免费视频| 黄网站色视频无遮挡免费观看| 欧美黄色淫秽网站| 亚洲精品美女久久久久99蜜臀 | 亚洲色图 男人天堂 中文字幕| 国产在线观看jvid| 国产99久久九九免费精品| 天天操日日干夜夜撸| 欧美日韩亚洲高清精品| 成人三级做爰电影| 女性生殖器流出的白浆| 精品少妇一区二区三区视频日本电影| 亚洲av男天堂| 巨乳人妻的诱惑在线观看| 国产成人欧美在线观看 | 亚洲色图综合在线观看| 欧美黑人精品巨大| 欧美中文综合在线视频| 国产欧美日韩一区二区三 | e午夜精品久久久久久久| 老熟女久久久| 久久久久久亚洲精品国产蜜桃av| 在线观看一区二区三区激情| 91麻豆av在线| 人妻 亚洲 视频| 亚洲av电影在线观看一区二区三区| 蜜桃在线观看..| 国产精品一区二区免费欧美 | 精品人妻熟女毛片av久久网站| 久久久久久久久免费视频了| 19禁男女啪啪无遮挡网站| 好男人视频免费观看在线| 亚洲九九香蕉| 亚洲国产精品成人久久小说| 这个男人来自地球电影免费观看| 亚洲精品在线美女| 一区二区av电影网| 国产真人三级小视频在线观看| 国精品久久久久久国模美| 男女边摸边吃奶| 十八禁高潮呻吟视频| 黄色a级毛片大全视频| 国产精品久久久久久人妻精品电影 | 黄色a级毛片大全视频| cao死你这个sao货| 亚洲国产精品国产精品| 2018国产大陆天天弄谢| 国产主播在线观看一区二区 | 美女中出高潮动态图| 欧美久久黑人一区二区| videosex国产| 99国产精品一区二区三区| 久久精品成人免费网站| 午夜视频精品福利| 狂野欧美激情性xxxx| 亚洲视频免费观看视频| 国产99久久九九免费精品| 美女脱内裤让男人舔精品视频| 老司机在亚洲福利影院| 如日韩欧美国产精品一区二区三区| 韩国精品一区二区三区| 午夜激情久久久久久久| 91精品三级在线观看| 久久青草综合色| 狠狠婷婷综合久久久久久88av| 国产黄色视频一区二区在线观看| 一级,二级,三级黄色视频|