• <tr id="yyy80"></tr>
  • <sup id="yyy80"></sup>
  • <tfoot id="yyy80"><noscript id="yyy80"></noscript></tfoot>
  • 99热精品在线国产_美女午夜性视频免费_国产精品国产高清国产av_av欧美777_自拍偷自拍亚洲精品老妇_亚洲熟女精品中文字幕_www日本黄色视频网_国产精品野战在线观看 ?

    基于質(zhì)量分級(jí)的數(shù)據(jù)質(zhì)量控制研究

    2013-08-15 00:48:29劉雙紅余建國(guó)
    河南科技 2013年18期
    關(guān)鍵詞:數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)源分級(jí)

    劉雙紅 余建國(guó)

    (鄭州航空工業(yè)管理學(xué)院,河南 鄭州 450005)

    1 引言

    數(shù)據(jù)倉(cāng)庫(kù)技術(shù)在電信、金融、零售等多個(gè)行業(yè)都得到了廣泛應(yīng)用,在優(yōu)化企業(yè)資源配置、提升企業(yè)的協(xié)同和資源共享,提高企業(yè)的核心競(jìng)爭(zhēng)力和創(chuàng)新力等諸多方面發(fā)揮了重要作用。 但是由于數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)來(lái)自于多種異質(zhì)業(yè)務(wù)數(shù)據(jù)源及Web 數(shù)據(jù),因而這些數(shù)據(jù)源可能分布在不同的網(wǎng)絡(luò)中,以不同的方式存在不同的數(shù)據(jù)庫(kù)中, 使用不同的硬件平臺(tái)及不同的操作系統(tǒng)。 所以對(duì)系統(tǒng)中的數(shù)據(jù)進(jìn)行嚴(yán)格地質(zhì)量控制已成為系統(tǒng)面臨的一個(gè)關(guān)鍵問(wèn)題,否則基于劣質(zhì)數(shù)據(jù)進(jìn)行的分析非但不能達(dá)到預(yù)期的效果還會(huì)給企業(yè)帶來(lái)?yè)p失。

    2 數(shù)據(jù)倉(cāng)庫(kù)特征及數(shù)據(jù)質(zhì)量的度量因素

    由于數(shù)據(jù)倉(cāng)庫(kù)中的特殊作用,它不同于一般的數(shù)據(jù)庫(kù)。 存儲(chǔ)在數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)具有面向主題性,數(shù)據(jù)集成,數(shù)據(jù)的歷史性,來(lái)源廣泛、變化和支持決策的特征。

    2.1.1 面向主題

    主題是一個(gè)抽象的概念,是數(shù)據(jù)分類標(biāo)準(zhǔn)更高的水平。 每一個(gè)主題對(duì)應(yīng)一個(gè)宏觀分析,是用戶關(guān)心的對(duì)企業(yè)決策最重要的方面。 一個(gè)主題通常與操作型信息系統(tǒng)的多種數(shù)據(jù)類型關(guān)聯(lián)。 數(shù)據(jù)倉(cāng)庫(kù)中的所有數(shù)據(jù)都是以主題的形式組織,數(shù)據(jù)倉(cāng)庫(kù)的創(chuàng)建、使用,都圍繞主題實(shí)現(xiàn)。 例如,企業(yè)將有幾個(gè)特殊的數(shù)據(jù)庫(kù),如定價(jià)數(shù)據(jù)庫(kù),財(cái)務(wù)數(shù)據(jù)庫(kù),客戶數(shù)據(jù)庫(kù),市場(chǎng)信息數(shù)據(jù)庫(kù),每個(gè)數(shù)據(jù)庫(kù)等按主題來(lái)組織,如客戶服務(wù)數(shù)據(jù)庫(kù)記錄客戶的咨詢和投訴情況,財(cái)務(wù)數(shù)據(jù)庫(kù)記錄客戶的支出。

    2.1.2 大量集成、隨時(shí)間變化的數(shù)據(jù)

    集成是指數(shù)據(jù)進(jìn)入數(shù)據(jù)倉(cāng)庫(kù)之前必須通過(guò)數(shù)據(jù)處理和集成的,這是創(chuàng)建數(shù)據(jù)倉(cāng)庫(kù)的最重要的和復(fù)雜的步驟。 數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)不是直接來(lái)自源數(shù)據(jù)庫(kù)系統(tǒng)。 原有的數(shù)據(jù)庫(kù)系統(tǒng)每天記錄每個(gè)業(yè)務(wù)處理,這些數(shù)據(jù)不適合分析,所以進(jìn)入數(shù)據(jù)倉(cāng)庫(kù)前的數(shù)據(jù)必須經(jīng)過(guò)統(tǒng)一,綜合計(jì)算和處理,及對(duì)有用的數(shù)據(jù)項(xiàng)的處理分析,并且不需要全面的數(shù)據(jù)清除,并可能添加一些涉及到的外部數(shù)據(jù),以有利于更好的決策分析。

    2.1.3 來(lái)源廣泛

    數(shù)據(jù)倉(cāng)庫(kù)中和每個(gè)主題相對(duì)的數(shù)據(jù)來(lái)自與多個(gè)分散、不同的數(shù)據(jù)庫(kù)系統(tǒng),因此會(huì)有很多重復(fù)的和一致的,這些數(shù)據(jù)必須轉(zhuǎn)換為統(tǒng)一的定義和標(biāo)準(zhǔn),以消除重復(fù),誤差,確保數(shù)據(jù)的質(zhì)量,以獲得更可靠的結(jié)果數(shù)據(jù)分析。 企業(yè)的決策并不取決于企業(yè)內(nèi)部的環(huán)境, 還需要決策者考慮企業(yè)外部環(huán)境的多種因素。因此,除了企業(yè)內(nèi)部數(shù)據(jù),一個(gè)企業(yè)的數(shù)據(jù)倉(cāng)庫(kù)中還包含了許多外部數(shù)據(jù)。

    2.1.4 用于企業(yè)的決策

    采用傳統(tǒng)的數(shù)據(jù)庫(kù)實(shí)現(xiàn)數(shù)據(jù)的分析和處理是困難的,因?yàn)閭鹘y(tǒng)數(shù)據(jù)庫(kù)是為企業(yè)日常事務(wù)處理設(shè)計(jì)的。 數(shù)據(jù)倉(cāng)庫(kù)不僅通過(guò)聯(lián)機(jī)分析處理手段分析數(shù)據(jù), 而且提供通用的數(shù)據(jù)視圖,支持高層次的決策分析。 數(shù)據(jù)倉(cāng)庫(kù)能從龐大的信息量中為用戶獲取戰(zhàn)略信息的解決方案。 它是基于大規(guī)模數(shù)據(jù)庫(kù)的決策支持系統(tǒng)環(huán)境的核心,彌補(bǔ)了傳統(tǒng)數(shù)據(jù)庫(kù)系統(tǒng)的缺點(diǎn)。

    2.2 數(shù)據(jù)質(zhì)量度量因素

    數(shù)據(jù)是組織最具價(jià)值的資產(chǎn)之一, 高質(zhì)量的數(shù)據(jù)可以使企業(yè)保持競(jìng)爭(zhēng)力并在經(jīng)濟(jì)動(dòng)蕩時(shí)期立于不敗之地。 根據(jù)全面質(zhì)量管理(TQM),客觀的度量機(jī)制必須要附加在主觀的方法和建議之上來(lái)保證最終產(chǎn)品的質(zhì)量。 下面給出TQM 中衡量數(shù)據(jù)質(zhì)量重要的幾個(gè)公共參數(shù)[1]:

    有效性(Validity):指單個(gè)屬性的值是否符合客觀邏輯和業(yè)務(wù)邏輯。 如:客戶資料中的地址郵編、電話區(qū)號(hào)、年齡、收入情況等是否在有效的取值范圍之內(nèi)。

    準(zhǔn)確性(Accuracy):是指數(shù)據(jù)是否真實(shí)客觀。在信息有效性的基礎(chǔ)上獲得真實(shí)的數(shù)據(jù)。 例如,由于客戶在個(gè)人隱私方面的自我保護(hù),往往有意地提供不符合實(shí)際的信息,如謊報(bào)地址、收入、工作單位等等。

    一致性(Consistency):指不同系統(tǒng)、不同業(yè)務(wù)之間關(guān)聯(lián)的數(shù)據(jù)是否一致,包括源系統(tǒng)之間同一數(shù)據(jù)是否一致,源數(shù)據(jù)與抽取的數(shù)據(jù)是否一致,數(shù)據(jù)倉(cāng)庫(kù)內(nèi)部各處理環(huán)節(jié)數(shù)據(jù)是否一致。

    完整性(Completeness):指所有信息、屬性是否按照業(yè)務(wù)規(guī)則完整填寫,包括數(shù)據(jù)源是否完整、維度取值是否完整等。

    惟一性(Uniqueness):數(shù)據(jù)值被約束成一組獨(dú)特的條目,每個(gè)值只有惟一的類型(如主鍵值、索引等),與惟一性沖突的記錄的比率(重復(fù)的主鍵值)。

    3 數(shù)據(jù)質(zhì)量問(wèn)題分析

    數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)質(zhì)量與數(shù)據(jù)源、 數(shù)據(jù)處理和應(yīng)用都有關(guān)系。 數(shù)據(jù)倉(cāng)庫(kù)裝載數(shù)據(jù)流程包括:ETL 是數(shù)據(jù)抽取(Extract)、轉(zhuǎn)換(Transform)、清洗(Cleansing)、裝載(Load)的過(guò)程。 用戶從數(shù)據(jù)源抽取出所需的數(shù)據(jù),經(jīng)過(guò)數(shù)據(jù)清洗、轉(zhuǎn)換,最終按照預(yù)先定義好的數(shù)據(jù)倉(cāng)庫(kù)模型,將數(shù)據(jù)加載到數(shù)據(jù)倉(cāng)庫(kù)。 在這個(gè)過(guò)程中,任何一個(gè)環(huán)節(jié)都會(huì)影響數(shù)據(jù)質(zhì)量[2]。

    3.1 數(shù)據(jù)源

    數(shù)據(jù)源是數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的基礎(chǔ)。通常包括企業(yè)內(nèi)部信息和外部信息。 內(nèi)部信息包括原有操作型系統(tǒng)中的各種業(yè)務(wù)處理數(shù)據(jù)和各類文檔數(shù)據(jù)。外部信息包括各類法律法規(guī)、市場(chǎng)信息和競(jìng)爭(zhēng)對(duì)手的信息。所以數(shù)據(jù)倉(cāng)庫(kù)會(huì)集成多個(gè)數(shù)據(jù)源的數(shù)據(jù),有來(lái)自關(guān)系數(shù)據(jù)庫(kù)的,有來(lái)自ERP 數(shù)據(jù)庫(kù)的,有來(lái)自普通文件的。

    在一個(gè)單獨(dú)的數(shù)據(jù)集可能會(huì)出現(xiàn)數(shù)據(jù)質(zhì)量問(wèn)題, 如那些發(fā)生在一個(gè)文件或數(shù)據(jù)庫(kù)。 這些問(wèn)題包括數(shù)據(jù)遺漏,數(shù)據(jù)異常,數(shù)據(jù)重復(fù)等等。 數(shù)據(jù)的遺漏意味著有一些記錄的屬性沒有數(shù)據(jù)。 一般來(lái)說(shuō),這個(gè)問(wèn)題是因?yàn)闆]有答案,或在市場(chǎng)調(diào)查的誤操作,或一些在數(shù)據(jù)庫(kù)或數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)被破壞。 數(shù)據(jù)異常是指數(shù)據(jù)庫(kù)中的孤立點(diǎn)。 這些孤立的點(diǎn)不符合通用數(shù)據(jù)模型,它們與不同或相同的數(shù)據(jù)集的其他數(shù)據(jù)不一致。 例如,如果記錄一個(gè)人的年齡150 歲,這個(gè)錯(cuò)誤可能會(huì)在數(shù)據(jù)輸入過(guò)程中產(chǎn)生的。 此外,孤立點(diǎn)可能是事情的真實(shí)反映,如一個(gè)公司總裁的薪水高于普通職工的收入時(shí)產(chǎn)生的孤立點(diǎn)。 數(shù)據(jù)重復(fù)性指的是在許多記錄是一樣的現(xiàn)象。

    多數(shù)據(jù)源集成后數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)質(zhì)量的發(fā)生尤為突出。 每個(gè)數(shù)據(jù)源都是為特定的目設(shè)計(jì),部署和維護(hù)的。 換句話說(shuō),數(shù)據(jù)源的設(shè)計(jì)與開發(fā)是獨(dú)立的。 結(jié)果是,數(shù)據(jù)源的數(shù)據(jù)庫(kù)管理系統(tǒng)方面,如數(shù)據(jù)模型,模式的設(shè)計(jì)和公式有很大的不同。 模式相關(guān)的多個(gè)數(shù)據(jù)源的問(wèn)題主要包括名稱和結(jié)構(gòu)沖突。 名稱沖突的事實(shí),一個(gè)相同的名字,代表不同的對(duì)象或不同的名字代表同一個(gè)對(duì)象;結(jié)構(gòu)沖突的現(xiàn)象,同一對(duì)象采用不同的表示方法在不同來(lái)源的系統(tǒng)顯示。 例如,在屬性不同數(shù)據(jù)源的表,同一個(gè)對(duì)象可以在不同的組件結(jié)構(gòu)的分析,數(shù)據(jù)模型和完整性約束。

    3.2 ETL 過(guò)程

    ETL 是構(gòu)建數(shù)據(jù)倉(cāng)庫(kù)的重要一環(huán), 用戶從數(shù)據(jù)源抽取出所需的數(shù)據(jù),經(jīng)過(guò)數(shù)據(jù)清洗,最終按照預(yù)先定義好的數(shù)據(jù)倉(cāng)庫(kù)模型,將數(shù)據(jù)加載到數(shù)據(jù)倉(cāng)庫(kù)中去,這一過(guò)程非常復(fù)雜。 在ETL過(guò)程中,也會(huì)產(chǎn)生數(shù)據(jù)質(zhì)量問(wèn)題。

    數(shù)據(jù)抽取:從源系統(tǒng)中抽取數(shù)據(jù),一般要編制代碼或者借助一些工具配置進(jìn)行數(shù)據(jù)抽取,若編寫的代碼錯(cuò)誤或工具配置不當(dāng),都會(huì)導(dǎo)致原始數(shù)據(jù)正確而抽取出來(lái)的數(shù)據(jù)不正確。

    數(shù)據(jù)清洗、轉(zhuǎn)換:數(shù)據(jù)清洗的任務(wù)是過(guò)濾那些不符合要求的數(shù)據(jù),不符合要求的數(shù)據(jù)主要是有不完整的數(shù)據(jù)、錯(cuò)誤的數(shù)據(jù)和重復(fù)的數(shù)據(jù)三大類。 數(shù)據(jù)轉(zhuǎn)換的任務(wù)主要是進(jìn)行不一致的數(shù)據(jù)轉(zhuǎn)換、數(shù)據(jù)粒度的轉(zhuǎn)換和一些商務(wù)規(guī)則的計(jì)算。 在數(shù)據(jù)清洗和轉(zhuǎn)換的過(guò)程中,少有疏漏就會(huì)產(chǎn)生劣質(zhì)數(shù)據(jù),對(duì)數(shù)據(jù)質(zhì)量造成影響。

    數(shù)據(jù)加載:數(shù)據(jù)轉(zhuǎn)換完成之后要進(jìn)行數(shù)據(jù)加載,在系統(tǒng)運(yùn)作時(shí)可能會(huì)出現(xiàn)重復(fù)加載或者加載失敗的情況,會(huì)導(dǎo)致數(shù)據(jù)量異常。

    4 數(shù)據(jù)質(zhì)量分級(jí)體系

    這里試圖建立一種質(zhì)量分級(jí), 并基于一套質(zhì)量指標(biāo)和質(zhì)量驗(yàn)證架構(gòu)來(lái)實(shí)現(xiàn)。 保持原貌,準(zhǔn)確地進(jìn)行前端展示是數(shù)據(jù)從數(shù)據(jù)源裝載到數(shù)據(jù)倉(cāng)庫(kù)過(guò)程中的要求, 為了滿足這樣的需求,在系統(tǒng)將數(shù)據(jù)展現(xiàn)給最終用戶之前需要對(duì)每次數(shù)據(jù)裝載進(jìn)行質(zhì)量評(píng)級(jí)。

    4.1 分級(jí)原則

    具體可分為三級(jí):第一級(jí),數(shù)據(jù)準(zhǔn)確,在預(yù)料的范圍內(nèi)產(chǎn)生可以接受的誤差,可以提交前端展現(xiàn),交付使用;第二級(jí),數(shù)據(jù)可疑,需要進(jìn)一步分離異常數(shù)據(jù),定位可疑原因,查明原因確認(rèn)后,可以提交;第三級(jí):數(shù)據(jù)錯(cuò)誤,需定位具體原因,重新裝載,直至達(dá)到第二級(jí)以上質(zhì)量標(biāo)準(zhǔn)以后方可提交[3]。 要實(shí)現(xiàn)質(zhì)量分級(jí)需要有一個(gè)足夠的質(zhì)量驗(yàn)證架構(gòu)能夠準(zhǔn)確地表達(dá)這些級(jí)別,保證數(shù)據(jù)質(zhì)量逐漸從第三級(jí)通往第二、一級(jí)。

    4.2 數(shù)據(jù)表象

    建立滿足質(zhì)量分級(jí)的一套架構(gòu),不光要有一套技術(shù)架構(gòu),還需要再定義一套質(zhì)量指標(biāo),基于這些指標(biāo)才能進(jìn)行某種規(guī)則的運(yùn)算然后再進(jìn)行質(zhì)量分級(jí)。

    一般情況下,數(shù)據(jù)的數(shù)值變化不能有異常的波動(dòng),出現(xiàn)零值或是特別大的值,這些一般都被懷疑是有問(wèn)題的。 質(zhì)量驗(yàn)證架構(gòu)就要解決上面提到的三種情況,數(shù)值波動(dòng)、偏離標(biāo)準(zhǔn)和違背邏輯,稱其為“數(shù)據(jù)表象”,它的具體表現(xiàn)就是一系列指標(biāo),例如數(shù)值增長(zhǎng)率、誤差率等。 如果已經(jīng)有一個(gè)指標(biāo)標(biāo)準(zhǔn),例如生產(chǎn)系統(tǒng)的報(bào)表,那么它就成為標(biāo)準(zhǔn),如果發(fā)現(xiàn)數(shù)據(jù)倉(cāng)庫(kù)中統(tǒng)計(jì)的指標(biāo)和標(biāo)準(zhǔn)值不一致,在不能說(shuō)明標(biāo)準(zhǔn)存在問(wèn)題并排除外部原因的情況下,應(yīng)查找數(shù)據(jù)處理是否存在問(wèn)題,數(shù)據(jù)處理的規(guī)則是否正確、ETL 流程是否順暢、實(shí)現(xiàn)方法是否錯(cuò)誤等。

    4.3 數(shù)據(jù)稽核

    數(shù)據(jù)稽核是數(shù)據(jù)質(zhì)量管控的一個(gè)核心內(nèi)容, 重點(diǎn)就是實(shí)現(xiàn)數(shù)據(jù)的完整性和一致性檢查,提升數(shù)據(jù)質(zhì)量。 在數(shù)據(jù)處理過(guò)程中,為ETL 過(guò)程的每一步留下操作、稽核記錄,以作為數(shù)據(jù)表象和質(zhì)量分級(jí)的底層支持,這一步我們可以稱為“數(shù)據(jù)稽核”。

    “稽核”根據(jù)預(yù)定義的數(shù)據(jù)稽核和校驗(yàn)規(guī)則,對(duì)數(shù)據(jù)進(jìn)行差異分析和異常分析,一般分為總量、分量和標(biāo)準(zhǔn)量稽核。 總量稽核,在兩個(gè)相鄰環(huán)節(jié)中,對(duì)數(shù)據(jù)的總量進(jìn)行驗(yàn)證。 總量指標(biāo)包括:總記錄數(shù),所有度量指標(biāo)的總值、均值等。 總量正確說(shuō)明數(shù)據(jù)沒有被丟棄,沒有不符合裝載邏輯規(guī)則的臟數(shù)據(jù)存在。 總量不正確, 則需要檢查本環(huán)節(jié)裝載日志中是否有被拋棄的記錄,如果沒有數(shù)據(jù)丟失,則需要檢查數(shù)據(jù)運(yùn)算邏輯規(guī)則。 分量稽核是指對(duì)相鄰的兩個(gè)環(huán)節(jié)中,在總量正確的前提下,對(duì)數(shù)據(jù)分布情況的稽核,在這個(gè)過(guò)程中,需要對(duì)每個(gè)維度上分布的度量進(jìn)行查詢,如果數(shù)據(jù)在每個(gè)維上的分布都正確,則在組合維查詢時(shí)數(shù)據(jù)也正確,可以保證多維分析的正確性。 標(biāo)準(zhǔn)量稽核,則是用一組數(shù)據(jù)的統(tǒng)計(jì)值和標(biāo)準(zhǔn)值對(duì)比[4]。

    稽核應(yīng)該在每個(gè)ETL 環(huán)節(jié)運(yùn)行完之后及時(shí)進(jìn)行, 保證每個(gè)環(huán)節(jié)都得到驗(yàn)證,輸出數(shù)據(jù)稽核報(bào)告,如果發(fā)現(xiàn)數(shù)據(jù)不一致,并產(chǎn)生警告信息發(fā)送給系統(tǒng)管理員,避免下一環(huán)節(jié)使用錯(cuò)誤數(shù)據(jù)繼續(xù)裝載。

    4.4 ETL 單元

    ETL 單元是不能細(xì)分的ETL 過(guò)程, 從數(shù)據(jù)源到數(shù)據(jù)倉(cāng)庫(kù)及數(shù)據(jù)展現(xiàn),通過(guò)若干個(gè)ETL 處理完成。例如可以將抽取、轉(zhuǎn)換放在一個(gè)ETL 單元中,抽取和轉(zhuǎn)換只能同時(shí)運(yùn)行,而如果將他們分作兩個(gè)單元,可以分別運(yùn)行,這有利于錯(cuò)誤恢復(fù)操作。 ETL單元的細(xì)分程度應(yīng)該依據(jù)具體應(yīng)用。 ETL 單元在質(zhì)量架構(gòu)中,是數(shù)據(jù)稽核的最小單位。通過(guò)控制每個(gè)ETL 單元的入口、出口,稽核流入和流出的數(shù)據(jù)。

    4.5 數(shù)據(jù)質(zhì)量分級(jí)框架

    面對(duì)海量數(shù)據(jù), 人工發(fā)現(xiàn)其中的潛在的錯(cuò)誤, 是不現(xiàn)實(shí)的,非自動(dòng)化的行為根本無(wú)法保證數(shù)據(jù)質(zhì)量檢查可以成為例行的工作,也就無(wú)法保證質(zhì)量。 這需要一個(gè)自動(dòng)化系統(tǒng)來(lái)幫助實(shí)現(xiàn),功能框架包括如下功能:

    (1)定義管理:定義ETL 單元、元數(shù)據(jù);定義數(shù)據(jù)的度量、度量腳本以及表象指標(biāo)。 定義ETL 單元遵循先小后大,循序漸進(jìn)的原則。大的ETL 單元容易忽略內(nèi)部的過(guò)程。因此,通常先將一個(gè)表的裝載或中間數(shù)據(jù)生成定義成一個(gè)小的ETL 單元。當(dāng)系統(tǒng)運(yùn)行穩(wěn)定,數(shù)據(jù)質(zhì)量逐漸改善以后,再去掉一些小ETL 單元,提高效率。

    (2)配置管理:配置稽核流程、數(shù)據(jù)稽核規(guī)則,對(duì)數(shù)據(jù)質(zhì)量檢查規(guī)則、數(shù)據(jù)質(zhì)量任務(wù)、考核規(guī)則進(jìn)行維護(hù)配置。

    (3)執(zhí)行管理:數(shù)據(jù)質(zhì)量任務(wù)的分派、處理、審核、同步、監(jiān)控。

    (4)報(bào)表管理:提供數(shù)據(jù)質(zhì)量相關(guān)報(bào)表以及對(duì)于考核結(jié)果的展示和查詢。

    (5)分級(jí)管理:根據(jù)稽核報(bào)告及分級(jí)原則,形成數(shù)據(jù)質(zhì)量分級(jí)結(jié)果。

    5 結(jié)束語(yǔ)

    討論了數(shù)據(jù)倉(cāng)庫(kù)中數(shù)據(jù)質(zhì)量管理的問(wèn)題, 結(jié)合數(shù)據(jù)源及ETL 過(guò)程對(duì)數(shù)據(jù)質(zhì)量問(wèn)題進(jìn)行分析, 建立了數(shù)據(jù)質(zhì)量分級(jí)體系,并給出了具體的功能架構(gòu),為數(shù)據(jù)倉(cāng)庫(kù)中數(shù)據(jù)質(zhì)量的控制提供了一種有效、可行的方法。 今后將以該質(zhì)量分級(jí)體系為基礎(chǔ),進(jìn)一步優(yōu)化設(shè)計(jì)該體系結(jié)構(gòu)并實(shí)現(xiàn)其分級(jí)功能。

    [1]袁滿,張雪.一種基于規(guī)則的數(shù)據(jù)質(zhì)量評(píng)價(jià)模型[J].西安:計(jì)算機(jī)技術(shù)與發(fā)展,2013,3(23):81-84

    [2]劉雙紅.數(shù)據(jù)倉(cāng)庫(kù)中數(shù)據(jù)質(zhì)量問(wèn)題研究[J].鄭州:光盤技術(shù),2008,(12):16-17

    [3]dwdmstudio. 數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)稽核方法.http://www.itpub.net/thread-378952-1-1.html,2013.6.20

    [4]happysboy. 談?wù)剶?shù)據(jù)質(zhì)量.http://dwdmstudio.bokee.com/167070.html,2013.5.26

    猜你喜歡
    數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)源分級(jí)
    基于數(shù)據(jù)倉(cāng)庫(kù)的住房城鄉(xiāng)建設(shè)信息系統(tǒng)整合研究
    Web 大數(shù)據(jù)系統(tǒng)數(shù)據(jù)源選擇*
    分級(jí)診療路難行?
    基于不同網(wǎng)絡(luò)數(shù)據(jù)源的期刊評(píng)價(jià)研究
    分布式存儲(chǔ)系統(tǒng)在液晶面板制造數(shù)據(jù)倉(cāng)庫(kù)中的設(shè)計(jì)
    電子制作(2016年15期)2017-01-15 13:39:15
    探析電力系統(tǒng)調(diào)度中數(shù)據(jù)倉(cāng)庫(kù)技術(shù)的應(yīng)用
    分級(jí)診療的“分”與“整”
    分級(jí)診療的強(qiáng)、引、合
    “水到渠成”的分級(jí)診療
    基于數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)分析探索與實(shí)踐
    超碰97精品在线观看| 97在线人人人人妻| 热99久久久久精品小说推荐| 人成视频在线观看免费观看| 性少妇av在线| 搡老熟女国产l中国老女人| 免费在线观看影片大全网站| 国产一卡二卡三卡精品| 精品福利永久在线观看| 成人18禁在线播放| av电影中文网址| 狠狠精品人妻久久久久久综合| 深夜精品福利| 麻豆国产av国片精品| 久久人妻av系列| 免费日韩欧美在线观看| 国产不卡一卡二| 中文字幕人妻丝袜制服| 日韩大片免费观看网站| 久久精品国产综合久久久| 妹子高潮喷水视频| 黄色视频不卡| 亚洲国产av新网站| av电影中文网址| 亚洲精品在线观看二区| 肉色欧美久久久久久久蜜桃| 一本—道久久a久久精品蜜桃钙片| 中文字幕高清在线视频| 午夜福利视频在线观看免费| 亚洲欧美一区二区三区黑人| 高清av免费在线| 免费日韩欧美在线观看| 两个人免费观看高清视频| 久久99一区二区三区| 国产精品亚洲av一区麻豆| 王馨瑶露胸无遮挡在线观看| 国产一区有黄有色的免费视频| 国产有黄有色有爽视频| 2018国产大陆天天弄谢| 精品少妇一区二区三区视频日本电影| 久久av网站| 18在线观看网站| 成人影院久久| 黄色 视频免费看| 一本一本久久a久久精品综合妖精| 中亚洲国语对白在线视频| 国产精品久久电影中文字幕 | 麻豆成人av在线观看| 两个人免费观看高清视频| 夜夜爽天天搞| 最近最新中文字幕大全电影3 | 日韩欧美国产一区二区入口| 国产亚洲精品久久久久5区| 国产97色在线日韩免费| a级毛片黄视频| 午夜福利欧美成人| 国产黄色免费在线视频| 免费在线观看日本一区| av线在线观看网站| 99精国产麻豆久久婷婷| 777米奇影视久久| 国产1区2区3区精品| 久久久久久人人人人人| 国产精品av久久久久免费| e午夜精品久久久久久久| 精品久久久精品久久久| 国产成人系列免费观看| 午夜福利在线观看吧| 夫妻午夜视频| 一边摸一边做爽爽视频免费| 19禁男女啪啪无遮挡网站| 操出白浆在线播放| netflix在线观看网站| 亚洲伊人色综图| 在线观看免费视频网站a站| 男女免费视频国产| 国产高清videossex| 亚洲五月色婷婷综合| 国产一卡二卡三卡精品| 最黄视频免费看| 在线观看免费高清a一片| 亚洲全国av大片| 一个人免费在线观看的高清视频| 亚洲精品乱久久久久久| 女同久久另类99精品国产91| 99在线人妻在线中文字幕 | 国产成人精品久久二区二区免费| 日本五十路高清| 成在线人永久免费视频| www.精华液| 侵犯人妻中文字幕一二三四区| kizo精华| 制服诱惑二区| 黑人操中国人逼视频| 午夜福利视频在线观看免费| 最新的欧美精品一区二区| 91老司机精品| 精品亚洲成国产av| 交换朋友夫妻互换小说| 日本av手机在线免费观看| 国产高清视频在线播放一区| 一夜夜www| 亚洲精品国产一区二区精华液| 一二三四在线观看免费中文在| 国产欧美日韩一区二区三| 一区二区三区精品91| 黄色a级毛片大全视频| 欧美日韩亚洲高清精品| 日本a在线网址| 大片电影免费在线观看免费| 精品一区二区三区视频在线观看免费 | 又大又爽又粗| 亚洲成人手机| 久久久精品免费免费高清| 十八禁人妻一区二区| 亚洲精品久久午夜乱码| 国产精品影院久久| 日韩人妻精品一区2区三区| 久久影院123| 婷婷成人精品国产| 国产有黄有色有爽视频| 最近最新中文字幕大全电影3 | 美女午夜性视频免费| 久久精品91无色码中文字幕| 精品高清国产在线一区| 国产免费av片在线观看野外av| 99riav亚洲国产免费| 99精品在免费线老司机午夜| 狠狠精品人妻久久久久久综合| 久久中文字幕一级| 最近最新中文字幕大全电影3 | 成年动漫av网址| 黄片大片在线免费观看| 精品卡一卡二卡四卡免费| 国产在线观看jvid| 亚洲色图 男人天堂 中文字幕| 免费一级毛片在线播放高清视频 | 国产高清videossex| 黄色 视频免费看| 免费高清在线观看日韩| 精品欧美一区二区三区在线| 亚洲精品中文字幕在线视频| 高清黄色对白视频在线免费看| 男女高潮啪啪啪动态图| 自线自在国产av| 国产伦人伦偷精品视频| av一本久久久久| 欧美亚洲日本最大视频资源| 男女之事视频高清在线观看| 国产99久久九九免费精品| 老熟女久久久| a在线观看视频网站| 亚洲 欧美一区二区三区| 日韩欧美国产一区二区入口| 久久99一区二区三区| 久久人妻av系列| 欧美+亚洲+日韩+国产| 国产免费福利视频在线观看| 精品少妇久久久久久888优播| 精品亚洲成a人片在线观看| 纵有疾风起免费观看全集完整版| 啦啦啦视频在线资源免费观看| 男女午夜视频在线观看| 嫁个100分男人电影在线观看| 国精品久久久久久国模美| 精品亚洲成a人片在线观看| 久久免费观看电影| 免费一级毛片在线播放高清视频 | 人人澡人人妻人| 日韩制服丝袜自拍偷拍| 中国美女看黄片| 99国产精品99久久久久| kizo精华| 精品久久蜜臀av无| 成人av一区二区三区在线看| 国产av精品麻豆| 黄色丝袜av网址大全| 亚洲国产成人一精品久久久| 精品福利永久在线观看| 丝袜美足系列| 精品乱码久久久久久99久播| 自拍欧美九色日韩亚洲蝌蚪91| 丰满饥渴人妻一区二区三| 国产男女超爽视频在线观看| 国产精品一区二区在线不卡| 一个人免费看片子| 波多野结衣一区麻豆| 国产成+人综合+亚洲专区| 另类亚洲欧美激情| 久久久精品国产亚洲av高清涩受| 午夜两性在线视频| 男女免费视频国产| 色播在线永久视频| 高清视频免费观看一区二区| 成人三级做爰电影| 久久精品国产a三级三级三级| 亚洲av欧美aⅴ国产| 看免费av毛片| 久久天堂一区二区三区四区| 久久久久视频综合| 欧美+亚洲+日韩+国产| 电影成人av| 真人做人爱边吃奶动态| 欧美黑人精品巨大| 99热网站在线观看| 久久久久久久大尺度免费视频| 18禁美女被吸乳视频| 91老司机精品| 80岁老熟妇乱子伦牲交| 国产单亲对白刺激| 亚洲专区中文字幕在线| 亚洲五月婷婷丁香| 老司机深夜福利视频在线观看| 国产精品av久久久久免费| 最近最新中文字幕大全电影3 | 1024香蕉在线观看| 欧美成人免费av一区二区三区 | 国产在线观看jvid| 日本wwww免费看| 一级a爱视频在线免费观看| 女性生殖器流出的白浆| 黄片播放在线免费| h视频一区二区三区| 精品国产乱码久久久久久小说| 下体分泌物呈黄色| 国内毛片毛片毛片毛片毛片| 99国产精品99久久久久| 天堂动漫精品| 搡老乐熟女国产| 无遮挡黄片免费观看| 久久精品成人免费网站| 国产成+人综合+亚洲专区| 一本一本久久a久久精品综合妖精| 国产精品亚洲av一区麻豆| 国产精品久久久久久精品古装| 免费女性裸体啪啪无遮挡网站| 人人妻人人添人人爽欧美一区卜| 少妇被粗大的猛进出69影院| 成人三级做爰电影| 丝袜喷水一区| 美女主播在线视频| 亚洲三区欧美一区| 母亲3免费完整高清在线观看| 热re99久久国产66热| 国产91精品成人一区二区三区 | 国产精品免费一区二区三区在线 | 亚洲情色 制服丝袜| 日韩成人在线观看一区二区三区| bbb黄色大片| 在线观看66精品国产| 黄色视频,在线免费观看| 国产在线精品亚洲第一网站| 欧美变态另类bdsm刘玥| 777米奇影视久久| 欧美+亚洲+日韩+国产| 亚洲人成电影观看| 老熟妇乱子伦视频在线观看| 黄色视频,在线免费观看| 天堂8中文在线网| 国产淫语在线视频| 夜夜夜夜夜久久久久| 久久婷婷成人综合色麻豆| 电影成人av| 国产在视频线精品| 成人亚洲精品一区在线观看| 一级毛片精品| 久久久久精品人妻al黑| 欧美大码av| 国产一区有黄有色的免费视频| 免费在线观看黄色视频的| 黄色成人免费大全| 在线看a的网站| 91精品国产国语对白视频| 黄片小视频在线播放| 久久久久视频综合| 免费黄频网站在线观看国产| 免费不卡黄色视频| av线在线观看网站| 黄色片一级片一级黄色片| 国产日韩欧美视频二区| 国产黄色免费在线视频| www日本在线高清视频| 久久精品人人爽人人爽视色| 精品国内亚洲2022精品成人 | 人人妻人人澡人人爽人人夜夜| av天堂久久9| 国产又爽黄色视频| aaaaa片日本免费| 丝袜在线中文字幕| 这个男人来自地球电影免费观看| 亚洲精品一卡2卡三卡4卡5卡| 黄频高清免费视频| 一区二区三区国产精品乱码| 国产三级黄色录像| xxxhd国产人妻xxx| 亚洲精品美女久久久久99蜜臀| 伦理电影免费视频| 一区二区日韩欧美中文字幕| 午夜激情久久久久久久| 国产精品麻豆人妻色哟哟久久| 视频区图区小说| 999久久久精品免费观看国产| 精品福利永久在线观看| 手机成人av网站| 香蕉丝袜av| 丝袜美足系列| 亚洲人成77777在线视频| av国产精品久久久久影院| 久久毛片免费看一区二区三区| av网站在线播放免费| 97在线人人人人妻| 夜夜夜夜夜久久久久| 狠狠精品人妻久久久久久综合| 国产色视频综合| 在线观看66精品国产| 纵有疾风起免费观看全集完整版| 亚洲一区中文字幕在线| 高清黄色对白视频在线免费看| 国产成+人综合+亚洲专区| 国产成人精品在线电影| 精品国产国语对白av| 国产精品九九99| 高潮久久久久久久久久久不卡| 久久久欧美国产精品| 2018国产大陆天天弄谢| 亚洲精品久久成人aⅴ小说| 成人国产av品久久久| 久久这里只有精品19| 午夜精品国产一区二区电影| bbb黄色大片| 欧美 日韩 精品 国产| 欧美乱妇无乱码| 一级黄色大片毛片| 最近最新免费中文字幕在线| 在线观看66精品国产| 久久亚洲真实| 久久国产精品影院| 久久精品成人免费网站| 亚洲成人免费电影在线观看| 国产色视频综合| 日本黄色视频三级网站网址 | 久久人人爽av亚洲精品天堂| 人人妻人人爽人人添夜夜欢视频| 人人妻人人添人人爽欧美一区卜| 一二三四社区在线视频社区8| 精品第一国产精品| 十八禁网站免费在线| 国产精品一区二区免费欧美| 国产欧美日韩精品亚洲av| 午夜免费鲁丝| 亚洲精品国产精品久久久不卡| 精品国产乱子伦一区二区三区| 欧美黄色片欧美黄色片| 国产成人av激情在线播放| 欧美黄色片欧美黄色片| xxxhd国产人妻xxx| 大香蕉久久网| 99九九在线精品视频| 国产精品.久久久| 丁香六月欧美| 午夜福利免费观看在线| 国产亚洲精品一区二区www | 777米奇影视久久| 国产日韩欧美在线精品| 国产男女内射视频| 他把我摸到了高潮在线观看 | av有码第一页| 99九九在线精品视频| 黄色视频,在线免费观看| 欧美日韩国产mv在线观看视频| 一个人免费在线观看的高清视频| 一本久久精品| 国产成人精品无人区| www日本在线高清视频| 高清黄色对白视频在线免费看| 女性被躁到高潮视频| 男女免费视频国产| 大片免费播放器 马上看| 久热这里只有精品99| 高清av免费在线| 色在线成人网| 精品国产乱码久久久久久小说| 亚洲熟女毛片儿| 国产黄频视频在线观看| 老司机靠b影院| 两性夫妻黄色片| 不卡一级毛片| 日日摸夜夜添夜夜添小说| 国产在线视频一区二区| 中文字幕av电影在线播放| 19禁男女啪啪无遮挡网站| 免费一级毛片在线播放高清视频 | 黄色视频在线播放观看不卡| 99riav亚洲国产免费| 国产精品一区二区精品视频观看| 视频在线观看一区二区三区| 久久久久久免费高清国产稀缺| tocl精华| 亚洲av成人不卡在线观看播放网| 日韩大片免费观看网站| av欧美777| 午夜久久久在线观看| 热99久久久久精品小说推荐| 黄色怎么调成土黄色| 日韩三级视频一区二区三区| 亚洲午夜理论影院| 满18在线观看网站| 一边摸一边做爽爽视频免费| 国产熟女午夜一区二区三区| 99国产极品粉嫩在线观看| 首页视频小说图片口味搜索| 国产高清激情床上av| 中文字幕最新亚洲高清| 欧美老熟妇乱子伦牲交| 脱女人内裤的视频| 大陆偷拍与自拍| 亚洲va日本ⅴa欧美va伊人久久| 狠狠婷婷综合久久久久久88av| 免费日韩欧美在线观看| 久久久久国内视频| 12—13女人毛片做爰片一| 国产极品粉嫩免费观看在线| 国产男靠女视频免费网站| 一本色道久久久久久精品综合| 搡老岳熟女国产| www.精华液| 亚洲,欧美精品.| 国产精品电影一区二区三区 | 色婷婷av一区二区三区视频| 午夜福利欧美成人| 久久国产精品人妻蜜桃| 成人亚洲精品一区在线观看| 两性午夜刺激爽爽歪歪视频在线观看 | 美女午夜性视频免费| svipshipincom国产片| 黄片小视频在线播放| 亚洲色图综合在线观看| 亚洲性夜色夜夜综合| 欧美性长视频在线观看| 午夜福利在线观看吧| 超碰97精品在线观看| 99久久国产精品久久久| 巨乳人妻的诱惑在线观看| 欧美日韩亚洲国产一区二区在线观看 | 精品国产乱子伦一区二区三区| 黄色视频不卡| 久久精品亚洲精品国产色婷小说| 一级,二级,三级黄色视频| 超碰97精品在线观看| 三级毛片av免费| 丁香欧美五月| 国产精品一区二区在线不卡| 日韩熟女老妇一区二区性免费视频| 午夜福利影视在线免费观看| 久久精品91无色码中文字幕| 亚洲国产成人一精品久久久| 老司机午夜福利在线观看视频 | 中文字幕色久视频| 国产一卡二卡三卡精品| 在线观看免费高清a一片| 肉色欧美久久久久久久蜜桃| 国产亚洲av高清不卡| 男人操女人黄网站| 国产亚洲精品第一综合不卡| www.精华液| 亚洲久久久国产精品| 中文字幕高清在线视频| 欧美精品一区二区大全| 悠悠久久av| 免费不卡黄色视频| 国产精品久久久人人做人人爽| 一本一本久久a久久精品综合妖精| 两个人看的免费小视频| 90打野战视频偷拍视频| 欧美日韩精品网址| 亚洲色图 男人天堂 中文字幕| 人人妻,人人澡人人爽秒播| 欧美另类亚洲清纯唯美| 十八禁网站免费在线| 搡老熟女国产l中国老女人| 电影成人av| 飞空精品影院首页| 国产精品亚洲av一区麻豆| 国产精品国产av在线观看| 亚洲精品av麻豆狂野| 男女之事视频高清在线观看| 丰满饥渴人妻一区二区三| 国产麻豆69| 男女无遮挡免费网站观看| 国产成人av激情在线播放| 黄色视频,在线免费观看| 亚洲精品一卡2卡三卡4卡5卡| 久久香蕉激情| 免费少妇av软件| 国产一区二区 视频在线| 国产精品一区二区在线观看99| 老司机亚洲免费影院| 欧美精品一区二区免费开放| 免费黄频网站在线观看国产| 久久国产精品人妻蜜桃| 99国产综合亚洲精品| 又紧又爽又黄一区二区| 一区二区av电影网| 日韩欧美一区视频在线观看| 国产免费视频播放在线视频| 精品福利永久在线观看| 国产欧美日韩一区二区三区在线| 欧美日韩亚洲国产一区二区在线观看 | 国产又色又爽无遮挡免费看| 久久99热这里只频精品6学生| 黄频高清免费视频| 超碰97精品在线观看| 首页视频小说图片口味搜索| 久久av网站| 午夜福利影视在线免费观看| 国产黄频视频在线观看| 午夜福利视频在线观看免费| 亚洲情色 制服丝袜| 国产有黄有色有爽视频| 激情视频va一区二区三区| 亚洲成a人片在线一区二区| 久久毛片免费看一区二区三区| 午夜福利视频精品| 久久亚洲真实| www.自偷自拍.com| 成人18禁在线播放| 老司机影院毛片| 亚洲欧美精品综合一区二区三区| 99热国产这里只有精品6| 久久精品熟女亚洲av麻豆精品| 亚洲 欧美一区二区三区| 国产福利在线免费观看视频| 久久久久久人人人人人| 亚洲国产中文字幕在线视频| 美女高潮到喷水免费观看| 激情在线观看视频在线高清 | 中文字幕高清在线视频| 亚洲精华国产精华精| 午夜精品国产一区二区电影| 午夜成年电影在线免费观看| 国产精品一区二区在线观看99| 侵犯人妻中文字幕一二三四区| 精品久久久久久电影网| 在线永久观看黄色视频| 精品国产国语对白av| 99riav亚洲国产免费| 91成人精品电影| 精品第一国产精品| 18禁美女被吸乳视频| 免费在线观看影片大全网站| 美女扒开内裤让男人捅视频| 亚洲av日韩精品久久久久久密| 亚洲欧美精品综合一区二区三区| 极品人妻少妇av视频| kizo精华| 老司机深夜福利视频在线观看| 亚洲天堂av无毛| 亚洲国产看品久久| 啦啦啦视频在线资源免费观看| 久久免费观看电影| 极品少妇高潮喷水抽搐| 中文字幕最新亚洲高清| 中文字幕人妻丝袜制服| 成人av一区二区三区在线看| √禁漫天堂资源中文www| 亚洲人成77777在线视频| 亚洲三区欧美一区| 欧美一级毛片孕妇| 国产亚洲欧美在线一区二区| 精品少妇一区二区三区视频日本电影| 国产97色在线日韩免费| 国产欧美日韩精品亚洲av| 亚洲午夜精品一区,二区,三区| 99久久国产精品久久久| 亚洲成人国产一区在线观看| av不卡在线播放| 午夜精品久久久久久毛片777| 欧美黑人精品巨大| 欧美乱码精品一区二区三区| 后天国语完整版免费观看| 一区福利在线观看| 亚洲中文日韩欧美视频| 亚洲五月婷婷丁香| 日韩 欧美 亚洲 中文字幕| 国产成人免费无遮挡视频| 亚洲av国产av综合av卡| 亚洲欧美色中文字幕在线| 日日爽夜夜爽网站| 又大又爽又粗| 亚洲国产毛片av蜜桃av| 久久青草综合色| 亚洲av欧美aⅴ国产| 97在线人人人人妻| 看免费av毛片| 亚洲一区二区三区欧美精品| 午夜福利视频在线观看免费| 国产av国产精品国产| 又大又爽又粗| 巨乳人妻的诱惑在线观看| 精品高清国产在线一区| 久久九九热精品免费| 午夜福利乱码中文字幕| 精品久久久精品久久久| 99精品久久久久人妻精品| 热99久久久久精品小说推荐| 两性午夜刺激爽爽歪歪视频在线观看 | 99精品欧美一区二区三区四区| a级毛片黄视频| av片东京热男人的天堂| 捣出白浆h1v1| av免费在线观看网站| 久久精品国产99精品国产亚洲性色 | 精品国产乱码久久久久久小说| 亚洲视频免费观看视频| 欧美日韩国产mv在线观看视频|