信息資源質量評估課件

信息資源的質量評估-2013.10.16

課時介紹信息資源質量的內涵信息資源質量評估的意義指標體系的設計信息資源質量評估方法信息資源質量評估的流程和實施案例學習1.信息資源質量的內涵1971年，Marschak提出信息資源是一個十分具體的概念，認為信息資源質量表征的是信息描述客觀事物或事件的準確性程度。1992年，Juran指出，可從一般意義和具體意義兩個角度描述信息資源的質量，即信息資源的有用性和具體條件下的適用性。2.信息資源質量評估的意義根據數據倉庫研究所(TDWI)2002年的一項研究報告指出,在美國,每年耗費約6000億美元,用于信息資源評估和保證信息質量。在信息時代,信息質量問題已開始成為影響決策的核心問題之一,成為企業(yè)的生命線,正在引起越來越廣泛的關注。對組織和企業(yè)而言，信息資源主要已信息產品和信息服務的形式呈現，并且它們具有價值和使用價值的雙重屬性。

信息資源的價值具有普遍性

信息資源的使用價值是基于個體的2.信息資源質量評估的意義2.信息資源質量評估的意義信息資源質量評估的效果直接決定著整個信息資源管理的基礎，因為信息質量的問題始終貫穿于信息資源管理的整個價值鏈，并決定著各階段的效率。

搜集→整理→組織→共享→利用→反饋2.信息資源質量評估的意義

公司治理，內部控制IPO，上市公司

融資能力會計信息質量評估股權結構

中小企業(yè)財會信息

會計制度國際化

審計方法

引例：病案質量評估作為醫(yī)療行為的信息載體，病案需詳實、客觀的記錄了醫(yī)務人員在診療過程中的診療行為。病案即是寶貴的醫(yī)學信息資源，同時也是醫(yī)療、教學、科研等工作的重要參考資料。評估指標設計病史記錄體格檢查入院后病志創(chuàng)建時間病例有無鑒別診斷記述病程記錄醫(yī)師信息據統(tǒng)計，2011年，31個省(區(qū)、市)主動公開政府信息2885萬多條，辦理依申請公開信息130多萬條，85%以上申請都予以公開。中央國家機關各部門各單位主動公開政府信息149萬多條，辦理依申請公開信息3000多條，70%以上的申請都予以公開。相關性：我國政府在公開信息時從自身角度而不是公民角度出發(fā)，并未將公民的需求置于政府信息公開工作的中心，致使公開一些政府喜歡而公民不喜歡、對公民沒有用處的信息。完整性：在財務管理一類中，廣州市人民政府于2012年2月29日發(fā)布了《廣州市市直行政事業(yè)單位2010年“三公”經費開支情況》，該文件只是粗略地公開了“三公”經費開支，并沒有將完整的、準確的經費開支信息告訴公民。即時性：以湖北省石首事件為例，2009年6月17日，一名酒店廚師非正常死亡，由于死因離奇，所以有關該事件的消息迅速傳播。6月19日，不明真相的群眾在該市東岳路和東方大道設路障，阻礙交通，現場秩序混亂。直到事發(fā)后第3天即6月19日，石首市政府網站才澄清事實。3.指標體系的設計基于對信息資源質量的不同理解和不同學科背景，不同學者各自提出了一套評估指標體系。不同的用戶，不同的應用領域也需要著不同的信息質量評估體系來評估。3.指標體系的設計四個層面的評估標準：基于信息資源內容的評估指標基于信息資源表達形式的評估指標基于信息資源系統(tǒng)的評估指標基于信息資源效用的評估指標3.指標體系的設計基于信息資源表達形式的評估指標：1.準確性–信息符號值與真是信息值相符程度2.可理解性–信息符號是否易于理解3.精簡性–信息符號是否簡單明了4.標準化程度–各種信息表達技術的統(tǒng)一程度(數據庫存儲，網絡通信，電子數據交換等)3.指標體系的設計基于信息資源系統(tǒng)的評估指標：1.完備性–信息資源的系統(tǒng)性和結構體系的完備2.可獲取性–主要是指易得性和可操作性3.快速響應性–系統(tǒng)是否反映敏捷4.可靠性–包括穩(wěn)定性和安全性3.指標體系的設計基于信息資源效用的評估指標：1.可用性–能否取得相關信息資源的使用權2.適量性–信息資源數量是否合適3.利用率–被使用的次數和深度（點擊率，下載次數，流量，被引用次數）4.價值增值性–信息資源的經濟效益和社會效益指標體系設立1)正確性：指記錄的值與現實世界的事實或值相一致。被數據消費者認為是數據質量的最重要的特征。2)完整性：這個概念主要描述應用所關心的所有記錄是否全部被收集并存儲。對于礦業(yè)生產監(jiān)測信息,完整性表示所需監(jiān)測點的數據完全獲得,不完整的信息意味著缺少如某些監(jiān)測點的礦壓或者瓦斯數據,因而不能做出及時、合理、正確的決策。指標體系設立3)時效性：指記錄的值未過期。有些數據必須及時獲得,以幫助迅速制定決策,而有些數據則時效性要求不高，比如戰(zhàn)略制定者也許要使用幾年來的信息,而生產管理者需要近期的數據。CaseStudy–健康類網站據調查,28.21%一71.79%的網民不同程度的通過網絡獲取健康知識,在人們對健康信息和醫(yī)療服務大量需求的背景下,健康類網站應運而生.樣本收集以各網站的月均月度覆蓋人數等用戶訪問數據為主要指標，根據2012年3月至2012年6月3個月的健康類網站排名趨勢，同時利用/百度/谷歌搜索引擎進人網站，剔除無效鏈接的網站，選出目前我國用戶訪問量較大!具有一定影響力的20家健康類網站指標選擇&評估①權威性：20家網站沒有一家取Honcode認證,同時也無一家網站獲得其他國際上著名的認證,如Discern，URAC醫(yī)學網站認證和MedCIRCL等（HONcode作為目前國際上具有廣泛影響力，

運用比較成熟的國際準則,在2009年就有118個國家的6500多個網站取得HONcode的認證）指標選擇&評估②目的性：在這20家網站內僅有20%的網站合理地介紹關于某一特殊療法,產品或服務益處和功用,并鏈接到產品的官方網站,同時提供可供選擇的其他產品或服務.

“但大部分網站在產品介紹時有廣告宣傳的成分,還帶有”最好”,”第一”等字樣,沒有提供可供參考的科學依據,期刊說明,實驗報告等.指標選擇&評估③作者可靠性：在這20家網站中,僅6家網站注明信息編輯者的名字，職位等相關信息,其他網站或是只有信息編輯者的名字,或是信息編輯者采用的是同一個人的名字,有的網站內信息甚至是匿名發(fā)表的。指標選擇&評估

④內容可靠性：健康類網站,大部分都涉及到醫(yī)療臨床專業(yè)知識如疾病的簡介發(fā)病的特點等,但這些網站內均沒有提到相應的參考書籍文獻,且網站均顯示的是信息發(fā)布時間,而不是原始創(chuàng)建時間或修訂日期。4.質量評估方法

普遍認為，對信息資源質量主要采用數理統(tǒng)計方法進行研究，并以克勞德·艾爾伍德·香農（ClaudeElwoodShannon）在1948年創(chuàng)立的信息論（InformationTheory）為基礎。

但是目前還沒有成熟的適用于所有信息資源評估的通用方法，已有方法大多是針對某一類特殊的信息資源。4.1質量評估方法分類分類按內容按涉及范圍按評估主體知識型信息微觀自我評估經濟信息中觀非我評估社會信息宏觀

4.1質量評估方法分類分類按類型按定性、定量傳統(tǒng)的文獻定性定量數字資源半定量

4.2定性評估方法定義：定性評估是評估主體按照某種評估標準，借助專業(yè)知識和個人經驗進行估計和推斷的一種評估方法。

定性方法強調的是給予理解的“直觀認識”，一般不含定量分析和具體數量指標，因而往往具有很大的主觀性。4.2定性評估方法定性評估方法包括：問卷法訪談法觀察法對比法同行評議4.3同行評議同行評議就是某一或若干領域的專家采用同一種評價標準，共同對涉及相關領域的一項事物進行評估的活動。同行評議是國際組織評估科研成果的主流方法。

美國國家基金會（NSF）

德意志聯合研究會（DFG）

歐洲科學基金會（ESF）

4.4定性分析的優(yōu)缺點能從整體上把握信息資源的概念，適用于評估較難量化的因素和復雜的信息行為。并且可以充分發(fā)揮人的經驗和智慧，從而擬補統(tǒng)計數據不足而產生的局限性。評估結果受評估主體主觀意識的影響和知識的局限，易帶有個人偏見。4.5定量評估方法定量評估主要是通過數字或其他科學手段對對象的量做出判定和分析評估，并保證評估結果在一定的置信范圍內?；诓煌睦碚?，針對不同的評估對象，定量評估的方法也多種多樣。4.6基于信息熵的評估法S表示例子集的總數U表示事件的可能狀態(tài)P代表某種狀態(tài)發(fā)生的可能性4.6基于信息熵的評估法信息熵越大，事情發(fā)生的不確定性越大，反之亦然。在所有狀態(tài)出現的幾率相等時，熵達到最大，而某種狀態(tài)的概率越發(fā)增大時，熵越小。Shannon認為信息的價值就在于能夠消除事物的不確定性。因此可將信息熵的減少量作為信息的效用和價值的評估標準。4.7文獻計量評估文獻計量評估是以“布拉福德定律”，“洛特卡定律”和“齊普夫定律”為理論基礎主要評價：

①評估文獻信息源，即出版物級別

②學術成果的傳播與反響

③評估對象被引用的刊物評價（引文分析法，文摘法）CaseStudy美國圖書館對電子信息資源質量評估的綜述圖書館內部的電子資源的評估問題則比較復雜，因為既要考慮到資源本身的價值，也要考慮到與圖書館自身的匹配程度。CaseStudy選擇資源的標準：平均成本，預期績效與圖書館系統(tǒng)是否兼容內容完整性、重要性和預期使用率允許到館的其他用戶使用允許用于電子教輔資料、服務支持、對撤銷訂購的限制和對館際互借的支持。CaseStudy評估方法與策略：圖書館直接采購電子資源也有一個循環(huán)的評估路徑。與館藏發(fā)展相關的眾多圖書館員都要參與到電子資源的采購與更新評估之中。聯盟內的館藏發(fā)展館員會互相派出，參與到更多聯盟內其他圖書館的專業(yè)、學科資源的評估。CaseStudy總結：

由此可見，國外許多研究是通過績效評估來驗證信息資源質量的，進而實現對其質量的評估，而不是單純地應用某個指標體系進行定性分析或定量評價。國外的研究以項目研究居多，通常由特定的機構或聯盟來實施，具備組織大規(guī)模數據收集和調查的能力。4.8網絡信息計量評估網絡信息資源的評估是利用網絡的動態(tài)性，交互性的特點，通過對網絡資源利用的統(tǒng)計分析實現的。（鏈接分析，網絡影響因子）Google的PageRank就是根據網站的內外部連接數來評估網站的質量，此外還有訪問量，點擊率，下載率等。4.9半定量–德爾非法德爾菲法，是采用背對背的通信方式征詢專家小組成員的預測意見，經過幾輪征詢，使專家小組的預測意見趨于集中，最后做出符合市場未來發(fā)揮在那趨勢的預測結論。團隊成員之間不得互相討論，不發(fā)生橫向聯系，只能與調查人員發(fā)生關系，以反復的填寫問卷，以集結問卷填寫人的共識及搜集各方意見。4.9半定量–德爾非法4.9半定量–德爾非法能充分發(fā)揮各位專家的作用，集思廣益，準確性高。能把各位專家意見的分歧點表達出來，取各家之長，避各家之短。避免權威人士的意見影響他人的意見；避免有些專家礙于情面，不愿意發(fā)表與其他人不同的意見避免出于自尊心而不愿意修改自己原來不全面的意見。5.評估流程

需求分析界定評估目的計劃并實施設定質量衡量尺度選擇評估策略CaseStudy-1背景介紹：2007年，微軟的知識部門對企業(yè)的內外部信息源做了一次評估，評估發(fā)現這些企業(yè)日常社交的信息源中隱含著大量有價值的信息資源。為此，2008年，微軟12億美金收購一家提供企業(yè)社交服務的公司Yammer來為其提供企業(yè)內部的社交網絡，從而能夠有效的收集與管理內部線上會議，員工討論組及員工與客戶交流時產生的大量信息流。CaseStudy-1Yammer簡介：Yammer是2008年9月推出的一個企業(yè)社會化網絡服務，但隨著Yammer平臺上功能和應用程序的逐漸增多，讓Yammer不再僅是一個通信平臺。這些新的應用程序包括投票、聊天、活動、鏈接、主題、問答、想法等等。它提供的ActivityFeed（活動源）可以聚合同事們在所有企業(yè)應用程序中的活動，而且用戶還可以對內容進行關注。CaseStudy-1Yammer帶給微軟的價值：

封閉性的企業(yè)微博：可以和企業(yè)的郵箱系統(tǒng)進行整合，只供企業(yè)的內部員工訪問，即提供了企業(yè)內部的信息交流平臺，又防止了企業(yè)敏感信息外泄，是替代企業(yè)內部論壇的一個工具。CaseStudy-1國內現狀：

中國員工在社交平臺上自由發(fā)言的可能性微乎其微，再者上班的時候也沒有必要集體侃大山。真正有價值的場景，是針對某一件事，某個任務，某個項目或是某個客戶進行的一些交流。這些信息是真實有用的，但目前它們99%都在QQ群或是微信群里，多數情況是聊完就完了，無法進行二次利用。CaseStudy-2背景介紹：

不僅對個人用戶而言，在政務和商務領域，微博也已成為一個十分重要的信息資源。對政府和企業(yè)而言，微博中蘊含的信息資源有著即時，易獲取，易理解，可靠性高和高增值性的特點。CaseStudy-2越來越多的政府部門開通了官方微博，通過微博直接快捷的獲取群眾的意見和看法，比如在推出一些新的政策之前，會通過微博來做民意調查。反腐部門甚至成立專門機構通過微