英國政府網(wǎng)頁歸檔與開發(fā)的新實踐及其啟示

何玉顏

[摘要]英國政府網(wǎng)頁檔案館負責保存1996年以來英國政府產(chǎn)生的英國政府網(wǎng)頁檔案，其對于政府網(wǎng)頁的歸檔和開發(fā)利用一直走在世界前端。近兩年，英國政府網(wǎng)頁檔案館在建設模式、技術手段、服務利用方式等方面都有了新的實踐，這些新的實踐對于我國政府網(wǎng)頁歸檔和開發(fā)利用有著重要的借鑒意義，我國應積極構建政府網(wǎng)頁歸檔政策框架，對政府網(wǎng)頁資源進行細顆?；_發(fā)與利用，開展面向全社會的深度合作，走出一條符合我國實踐情況的政府網(wǎng)頁歸檔與開發(fā)之路。

[關鍵詞]政府網(wǎng)頁檔案館政策框架細顆?；鐣献?/p>

[分類號]G279.1

The New Practice and Enlightenment of the UK Governments Web Archiving and Development

He Yuyan

（Department of Library， Information and Archives of Shanghai University， Shanghai， 200444）

Abstract： The UK Government Web Archives is responsible for preserving the British governments webpages archives that generated by the British government since 1996. It has been at the forefront of the world for governments webpages filing and development. In the past two years， the UK government web archives have had new practices and attempts in construction mode， technical support， and service utilization methods. These new practices have important reference value for our country. Based on these experiences， we should Actively construct a policy framework for the governments webpages filing， fine- grained develop and use of government webpages resources， and in-depth cooperate with the whole society， in order to develop a road to file and develop governments webpages， which conform to the condition of our country.

Keywords： Governments Web Archive； Policy Framework； Fine Grained； Social Cooperation

1引言

1999年1月，政府上網(wǎng)工程啟動大會在北京舉行，標志著“政府上網(wǎng)”工程正式啟動。項目啟動至今的近20年時間內(nèi)，該項工程取得了良好的成效。《全國檔案事業(yè)“十三五”規(guī)劃綱要》中指出，到2020年的發(fā)展目標之一是實現(xiàn)檔案資源的多樣化和利用的便捷化。政府網(wǎng)頁是展現(xiàn)政府形象的重要窗口和履行政府職能的關鍵工具，是不同歷史時期社會面貌的全面反映，政府網(wǎng)站中的信息可以為政府、社會組織和個人提供知識，具有憑證價值、記憶價值和知識價值，理應成為珍貴的數(shù)字檔案資源被歸檔保存，并加以更加細顆?；拈_發(fā)和利用。如今，大數(shù)據(jù)、云計算等新興技術的發(fā)展為政府網(wǎng)頁的歸檔保存和資源開發(fā)提供了新的契機。

英國政府是互聯(lián)網(wǎng)的早期使用者，其網(wǎng)站可追溯到1996年，英國政府網(wǎng)頁檔案館負責保存1996年以來英國政府產(chǎn)生的英國政府網(wǎng)頁檔案、英國政府社交媒體賬戶的推文和視頻檔案，用戶可以在其中瀏覽英國政府網(wǎng)站的整個歷史，甚至可以瀏覽到一些已被剔除的部門舉措，例如2010年已經(jīng)停止使用的教育維護津貼等舉措的信息記錄。自成立以來，英國政府網(wǎng)頁檔案館已經(jīng)保存了巨大規(guī)模的數(shù)據(jù)，包括5000多個網(wǎng)站以及來自政府社交媒體賬戶的推文和視頻，截至2018年檔案數(shù)據(jù)的擁有量超過120TB[1]。如何實現(xiàn)如此大規(guī)模體量的數(shù)據(jù)管理與開發(fā)利用，是英國政府網(wǎng)頁檔案館近年來不斷探索的主題。近年來，隨著用戶需求的變化和技術的飛速進步，英國政府網(wǎng)頁檔案館開始了變革和創(chuàng)新的新實踐，這些實踐經(jīng)驗對于我國政府網(wǎng)頁的歸檔具有重要的借鑒意義。因此，本文以英國政府網(wǎng)頁檔案館的近幾年來的實踐新動態(tài)為例，從建設模式、技術手段、開發(fā)方式等方面進行解析，并提出對于我國政府網(wǎng)頁歸檔保存及資源開發(fā)的借鑒和啟示。

2英國政府網(wǎng)頁檔案館的實踐新動態(tài)

2.1以合作共建為主要建設模式

英國政府網(wǎng)頁檔案館隸屬英國國家檔案館，自2003年以來，國家檔案館一直通過英國政府網(wǎng)絡檔案館定期拍攝英國中央政府網(wǎng)站的“快照”。英國國家檔案館產(chǎn)生的網(wǎng)絡流量比所有其他國家檔案網(wǎng)絡服務的流量高出數(shù)倍，因此政府網(wǎng)頁檔案館一直與擁有專業(yè)知識的外包商合作，管理這種規(guī)模的網(wǎng)頁收集和開發(fā)。2016年之前，英國政府網(wǎng)頁檔案館還是主要以自主管理模式為主，但由于數(shù)據(jù)量的不斷增多，自主管理模式面臨困境，因此逐漸開始探索合作共建模式。2017年7月，英國政府網(wǎng)頁檔案館開始與互聯(lián)網(wǎng)記憶研究基金會（Internet Memory Research，簡稱IMR）合作，互聯(lián)網(wǎng)記憶研究基金會于2011年在巴黎成立，是最早一批專門從事網(wǎng)頁歸檔的組織，該組織借助大規(guī)模網(wǎng)絡爬蟲，數(shù)據(jù)存儲和處理的技術和能力，幫助客戶收集，處理和利用海量數(shù)據(jù)[2]。英國政府網(wǎng)頁檔案館通過IRM構建的數(shù)據(jù)中心來保管捕獲到的大量政府網(wǎng)頁數(shù)據(jù)。伴隨著英國政府檔案館需求的更新，為了滿足英國國家檔案館的“云優(yōu)先”存儲要求，即網(wǎng)絡資源必須存儲在云上，英國政府網(wǎng)頁檔案館開始尋求新的合作伙伴。他們最新的合作商Mirrorweb是檔案云存儲方面的專家，該公司的主要業(yè)務是提供動態(tài)的、可擴展的網(wǎng)頁歸檔與社交媒體歸檔的云存儲平臺[3]。為使訪問者獲得更佳的用戶體驗，英國政府網(wǎng)頁檔案館還曾與美國洛斯阿拉莫斯國家實驗室合作，使用其開發(fā)成果Memento，以添加插件的形式允許用戶通過使用Web檔案訪問特定的Web資源（例如，網(wǎng)頁，文檔或數(shù)據(jù)），并在過去的某個時間訪問特定的Web資源，從而為Web添加時間維度[4]。與此同時，英國政府檔案館也通過博客、推特等新媒體平臺發(fā)布當前他們遇到的技術或管理障礙，廣泛接納用戶的反饋并呼吁公眾為其建言獻策，提供更好的解決方案。

以上可以看出英國政府網(wǎng)頁檔案館積極尋求與外界的合作共建。他們立足自己的需求，尋求與技術供應商、研究所、基金會、用戶等組織和個人開展廣泛合作。這種合作共建的模式一方面為英國政府網(wǎng)頁檔案館實現(xiàn)超大規(guī)模數(shù)據(jù)的長期安全保存提供了保障，另一方面也能夠不斷適應理念和技術的更新迭代，保持技術先進性和活力，為檔案館訪問者提供最佳的用戶體驗。

2.2以云存儲為核心技術支撐

為響應英國“云優(yōu)先”政策，即在進行技術投資時優(yōu)先選擇云服務，英國政府網(wǎng)頁檔案館開始探索以云存儲為核心的技術支撐。云存儲對于英國政府網(wǎng)頁歸檔的主要優(yōu)勢主要有：首先，云存儲技術可以應對檔案館超過120TB的龐大數(shù)據(jù)量的管理；其次，云存儲便于存儲空間的擴展；最后，云存儲使得基于網(wǎng)頁的服務更加安全與便捷。深化與云服務提供商Mirrorweb的合作，對大量數(shù)據(jù)進行云遷移并建立數(shù)據(jù)索引是英國政府網(wǎng)頁檔案館的最新實踐。在與Mirrorweb合作之前，大量數(shù)據(jù)存儲在標準格式ARC文件中，最初檔案館采用互聯(lián)網(wǎng)直接傳輸加密文件的傳輸手段，但這種方法效率低且易出錯。后來英國政府網(wǎng)頁檔案館嘗試使用物理媒介傳輸，使用英國國家檔案館物理數(shù)據(jù)傳輸標準媒介2TB USB-3硬盤。在2015年至2017年之間，大約120TB的數(shù)據(jù)通過這種方法傳輸，數(shù)據(jù)通過外包公司的捕獲后到達檔案館自己的Kew站點，再轉移到硬盤上進行長期保存，這種方式雖然利于保存，但很難實現(xiàn)大量數(shù)據(jù)的快速訪問。而后英國政府網(wǎng)頁檔案館采用PB級數(shù)據(jù)傳輸解決方案亞馬遜Snowball傳輸技術，將數(shù)據(jù)復制并加密到內(nèi)部硬盤驅動器，然后將其運送到亞馬遜網(wǎng)絡服務數(shù)據(jù)中心以便傳輸?shù)皆贫?。云傳輸技術的使用使得英國政府網(wǎng)頁檔案館得以在兩周之內(nèi)完成120TB數(shù)據(jù)的遷移，大大節(jié)省了數(shù)據(jù)遷移的時間成本，也保證了海量數(shù)據(jù)的安全可用。在網(wǎng)頁的捕獲上，英國政府網(wǎng)頁檔案館使用最先進的技術來捕捉網(wǎng)站并使存檔網(wǎng)站可以訪問。包括使用Heritrix（專為網(wǎng)絡歸檔設計的網(wǎng)絡爬蟲。由Internet Archive撰寫，可以通過免費軟件許可獲得，并以Java編寫[5]）網(wǎng)絡爬蟲的最新穩(wěn)定版本來捕捉網(wǎng)站并使用pywb來回放存檔網(wǎng)站，這一方法已幫助政府網(wǎng)頁檔案館解決了舊的web檔案中存在的許多訪問上的問題[6]。

除了將云存儲技術作為當前英國政府網(wǎng)頁檔案館的核心技術支撐以外，英國國家檔案館目前正在積極調(diào)研和探索區(qū)塊鏈技術在檔案管理中的運用，該研究項目名為Archangel，由薩里大學（University of Surrey）主導，合作伙伴包括開放數(shù)據(jù)研究所等。該計劃還將探討區(qū)塊鏈可以在多大程度上解決與檔案管理有關的緊迫問題。該項目旨在通過區(qū)塊鏈技術的運用保證檔案館記錄的真實可信[7]。英國政府網(wǎng)頁檔案館也是英國國家檔案館的組成部分之一，在未來也將會共享此項目的成果，運用區(qū)塊鏈等更新的技術來保障保存的政府網(wǎng)頁和社交媒體記錄真實可信和長期可用。不斷進行支撐技術的創(chuàng)新迭代，是英國政府網(wǎng)頁檔案館得以長久穩(wěn)定的運行和為公眾提供利用的關鍵因素之一。

2.3以檢索功能為利用服務特色

英國政府網(wǎng)頁檔案館網(wǎng)站隸屬于英國國家檔案館，以在線網(wǎng)站的形式為社會各界提供利用。政府網(wǎng)頁檔案館網(wǎng)站設置在英國國家檔案館網(wǎng)站中“幫助你的研究（Help with your research）”欄目下，并列的項目還有“探索我們的目錄（Search discovery our catalog）”“從這里開始你的研究（Start your research here）”等欄目，因此可以看出，政府網(wǎng)頁檔案館的定位是英國國家檔案館為用戶的研究提供利用服務的一種重要方式，因此，政府網(wǎng)頁檔案館十分重視不斷完善檔案館網(wǎng)站的信息檢索服務，不斷探索如何使得用戶能夠更便捷地利用已歸檔的政府網(wǎng)頁和社交媒體。英國政府網(wǎng)頁檔案館強大的檢索功能，主要體現(xiàn)在其為用戶提供了多種多樣的檢索方式。檔案館首頁中涉及檢索功能的模塊有兩個：一個為直接檢索（Search），用戶在檢索框中直接輸入檢索關鍵詞即可。同時檢索功能支持對直接檢索結果進行進一步篩選，用戶可以通過關鍵詞、網(wǎng)址、文件格式類型（目前支持Excel、HTML、Text、Word、PDF、CSV六種格式類型）和年份對簡單檢索結果進行進一步篩選，提高檢索效率。另一個檢索模塊為字母A-Z的索引檢索，用戶可利用需要查詢內(nèi)容的首字母與索引進行比對，更加直觀和快速地找到所需內(nèi)容。此外，用戶使用指南被放在網(wǎng)站首頁顯眼的位置，用戶可以通過查詢操作指南，最快速和全面地了解如何使用該檔案館的檢索功能。

2015年底英國政府網(wǎng)頁檔案館進行了一次全面的用戶調(diào)研，結合現(xiàn)代化技術，對其服務功能進行了改進和完善，截至目前已取得了一定成效。首先從網(wǎng)頁視覺設計上，新改版的網(wǎng)站摒棄了之前首頁多圖片的設計，僅僅在首頁中呈現(xiàn)一張圖片，其余只設置六個板塊以供用戶檢索。通過關注小細節(jié)，實現(xiàn)更流暢的用戶體驗。2015年的用戶調(diào)研結果表明，用戶反映之前的全文搜索不可靠，功能有限，檢索功能需要改進。英國政府網(wǎng)頁檔案館的最新實踐是：第一，在云端運行檢索，以保證檢索的流暢可靠運行。第二，將OCR（光學字符識別）軟件作為索引過程的一部分運行在PDF格式文件中，因此現(xiàn)在可以搜索從紙質(zhì)原件掃描的文檔內(nèi)容，也可以實現(xiàn)包括政府部門，類別和捕獲年份等搜索結果。第三，全文搜索索引從之前的每季度更新轉變成每月更新，以保證新捕獲的網(wǎng)站能夠更加快速地實現(xiàn)檢索。自2016年以來的以上新嘗試，都體現(xiàn)了英國政府網(wǎng)頁檔案館將為用戶提供更加優(yōu)質(zhì)的服務作為首要任務，不論從技術上還是管理上，都進行了不斷的探索和完善。

3對我國政府網(wǎng)頁歸檔的啟示

3.1構建政府網(wǎng)頁歸檔政策框架

2017年5月《國務院辦公廳關于印發(fā)政府網(wǎng)站發(fā)展指引的通知》發(fā)布，其中提到“網(wǎng)頁歸檔是對政府網(wǎng)站歷史網(wǎng)頁進行整理、存儲和利用的過程。政府網(wǎng)站遇整合遷移、改版等情況，要對有價值的原網(wǎng)頁進行歸檔處理。歸檔后的頁面要能正常訪問，并在顯著位置清晰注明“已歸檔”和歸檔時間”。我國網(wǎng)頁歸檔項目最早始于2002年1月，在國家“973”和“985”項目支持下，由北京大學網(wǎng)絡實驗室開發(fā)建設的中國網(wǎng)頁歷史信息存儲與展示系統(tǒng)，稱為中國Web信息博物館，截至目前已經(jīng)維護有9056638059個網(wǎng)頁。2003年初，我國國家圖書館正式啟動“網(wǎng)絡信息資源保存”試驗項目（Web InformationCollectionand Preservation， WICP）并于同年11月20日開通“網(wǎng)絡信息資源保存”項目主頁提供服務[8]。目前，一些省市檔案館也開始進行政府網(wǎng)頁歸檔的探索，將政府網(wǎng)頁作為珍貴的數(shù)字檔案資源加以保存?？傮w來看，我國政府網(wǎng)頁歸檔工作還處在相對分散、自成體系的階段，缺乏法律、政策和標準上的統(tǒng)一。因此，首先應從政策和法律上明確政府網(wǎng)站歸檔的重要性和價值，將政府網(wǎng)頁納入國家電子文件管理與數(shù)字檔案資源建設體系中去；其次應從宏觀層面對政府網(wǎng)頁的概念、特征、屬性、類別、技術標準等基礎問題進行界定；最后應明確政府網(wǎng)頁歸檔的責任主體與權責分配，檔案館在政府網(wǎng)頁歸檔、長期保存與開發(fā)利用上不可缺位，應從制度上強化檔案館在此方面的職責。

3.2探索政府網(wǎng)頁資源的細顆?；_發(fā)與利用

政府網(wǎng)頁中這些高密度的信息具有顯著的價值，對政府網(wǎng)頁加以歸檔保存的最終目的，是為了充分挖掘政府網(wǎng)頁中蘊含的知識和價值，為社會提供利用。長期以來，我國的檔案管理傳統(tǒng)傾向于粗顆粒的保管，“重管輕用”的工作模式依然存在，顯然這種模式已不適合于像政府網(wǎng)頁這樣的新型數(shù)字檔案資源。如今，新興技術的發(fā)展為政府網(wǎng)頁資源的細顆?；_發(fā)創(chuàng)造了諸多有利條件。首先，政府網(wǎng)頁資源的開發(fā)應做好基礎利用工作，保障用戶可以獲取到已歸檔的政府網(wǎng)頁資源。這需要對已歸檔的政府網(wǎng)站資源進行整合，提供開放查詢平臺和多樣化的檢索工具，正如英國政府網(wǎng)頁檔案館提供首字母檢索索引。其次，隨著用戶需求的不斷提升，開發(fā)利用工作應不僅僅局限于為用戶提供原生資源利用，而是應廣泛應用文本挖掘、語義關聯(lián)、知識圖譜、可視化等技術，對已歸檔政府網(wǎng)頁中的數(shù)據(jù)進行語義級的開發(fā)，還可以聯(lián)系其他檔案資源類型進行聯(lián)合開發(fā)，探索如何為用戶提供更多樣化、知識化的內(nèi)容和產(chǎn)品，如利用政府網(wǎng)頁中的數(shù)據(jù)舉辦在線專題展覽、開發(fā)文化創(chuàng)意產(chǎn)品等。最后，在政府網(wǎng)頁資源的開發(fā)和利用過程中，應充分調(diào)動公眾的參與積極性，采用眾包形式匯聚更多人的智慧，實現(xiàn)對政府網(wǎng)頁資源的多角度、多層次的開發(fā)和利用。

3.3開展面向全社會的深度合作

總結英國政府網(wǎng)頁檔案館項目的經(jīng)驗可以發(fā)現(xiàn)，英國政府網(wǎng)頁檔案館根據(jù)自身不同時期的業(yè)務需求，與社會各界廣泛開展合作，而我國政府網(wǎng)頁歸檔進程中在這一方面則有所欠缺。為此，檔案館在開展政府網(wǎng)頁歸檔項目時，其一，應積極尋求與社會資本合作，如將海量政府網(wǎng)頁數(shù)據(jù)的捕獲、存儲、遷移和長期保存等工作交由有經(jīng)驗和資質(zhì)的技術供應商來完成，諸如IBM、SUN等國外知名網(wǎng)絡服務供應商或浪潮、曙光等中國本土企業(yè)都可以為政府網(wǎng)頁歸檔提供更加專業(yè)化的解決方案。通過英國在“云優(yōu)先”背景下選擇改變以往的技術手段，與云服務供應商合作這一舉動可以看出，服務外包模式的優(yōu)勢在于有助于保持政府網(wǎng)頁歸檔和保存項目的先進性和靈活性，檔案館可以根據(jù)不同時期的現(xiàn)實需求選擇不同的技術服務商，以保障這項工作的長期穩(wěn)定開展。除了與外包服務商合作以外，還需要對政府網(wǎng)頁資源的生成者，以及政府職能部門及政府網(wǎng)頁資源的使用者，即政府網(wǎng)頁檔案館的用戶開展深入的調(diào)研和互動。英國政府網(wǎng)頁檔案館不斷完善的動力，很大程度是為了解決用戶調(diào)研中發(fā)現(xiàn)的問題，從而提供更好的用戶體驗。我國在開展政府網(wǎng)頁歸檔工作時，也應開展深入的調(diào)研，利用更多量化數(shù)據(jù)，以便形成適合我國實際情況的政府網(wǎng)頁歸檔與開發(fā)利用方案。

4結語

英國政府網(wǎng)頁檔案館長期以來能夠穩(wěn)定運行，并能為用戶提供良好的服務得益于合作共建的建設模式、不斷更迭的技術支撐和不斷改進的服務利用方式。我國政府網(wǎng)頁歸檔和資源建設尚未形成成熟完善的發(fā)展態(tài)勢，在思維轉變、法規(guī)政策、建設模式、技術水平等方面都需要進一步的探索和提升。英國政府網(wǎng)頁檔案館的成功實踐給了我們很多有益的借鑒和參考，我國政府網(wǎng)頁檔案的歸檔保存和開發(fā)利用工作應該積極吸納這些先進經(jīng)驗，并在充分調(diào)研的基礎上，走出一條符合我國實際情況的政府網(wǎng)頁歸檔和開發(fā)之路。

參考文獻

[1]How to move a 120 TB web archive to the cloud in two weeks[EB/OL].[2018-6-13].https：//blog.nationalarchives.gov.uk/blog/move-120-tb-web-archive-cloud-two-weeks/.

[2]About internet memory research[EB/OL].[2018-6-17]. https：//internetmemory. net/en/about/#about.

[3]Web & Social Media Archiving for Business and Government[EB/OL].[2018-6-17]. https：//www.mirrorweb.com.

[4]Memento in the UK Government Web Archive[EB/OL].[2018-6-17]. https：// blog.nationalarchives.gov.uk/blog/memento-in-the-uk-government-web-archive/.

[5]Heritrix[EB/OL].[2018-6-27]. https：//en.wikipedia.org/wiki/Heritrix.

[6]The UK Government Web Archive is now even better[EB/OL].[2018-6-27]. https：//blog.nationalarchives.gov.uk/blog/uk-government-web-archive-now-even-better/.

[7]英國政府官方檔案館正測試區(qū)塊鏈技術[EB/OL].[2018-6-27]. http：//bitejie. net/news/19098.html.

[8]曹玲，顏祥林.美國國會圖書館網(wǎng)頁歸檔項目的新動向[J].檔案學研究，2018（2）： 125-128.