數(shù)據(jù)庫(kù)的異構(gòu)問(wèn)題的解決技術(shù)研究的中期報(bào)告

數(shù)據(jù)庫(kù)的異構(gòu)問(wèn)題的解決技術(shù)研究的中期報(bào)告一、研究背景與意義隨著大數(shù)據(jù)時(shí)代的來(lái)臨，各種類型的數(shù)據(jù)源不斷涌現(xiàn)，而不同類型的數(shù)據(jù)源一般采用不同的數(shù)據(jù)格式和管理方式，導(dǎo)致數(shù)據(jù)之間的異構(gòu)性十分明顯。數(shù)據(jù)庫(kù)的異構(gòu)問(wèn)題是指不同數(shù)據(jù)庫(kù)之間的數(shù)據(jù)格式、數(shù)據(jù)類型、數(shù)據(jù)結(jié)構(gòu)、編碼方式等不同，導(dǎo)致難以實(shí)現(xiàn)數(shù)據(jù)的集成、查詢、分析和共享等功能，從而造成了相當(dāng)大的數(shù)據(jù)孤島。而數(shù)據(jù)庫(kù)的異構(gòu)問(wèn)題是亟待解決的一個(gè)技術(shù)問(wèn)題，因?yàn)殡S著數(shù)據(jù)積累的逐漸增加，各種數(shù)據(jù)源和數(shù)據(jù)類型將逐漸增多，數(shù)據(jù)庫(kù)的異構(gòu)問(wèn)題越來(lái)越明顯，使用傳統(tǒng)的集成方式已經(jīng)無(wú)法滿足需求。為了解決數(shù)據(jù)庫(kù)的異構(gòu)問(wèn)題，需要研究各種數(shù)據(jù)庫(kù)集成技術(shù)和數(shù)據(jù)轉(zhuǎn)化技術(shù)，以實(shí)現(xiàn)數(shù)據(jù)庫(kù)之間的數(shù)據(jù)交互和共享。二、研究進(jìn)展目前，關(guān)于數(shù)據(jù)庫(kù)的異構(gòu)問(wèn)題研究已經(jīng)取得了一些進(jìn)展，主要表現(xiàn)在以下幾個(gè)方面。1.數(shù)據(jù)庫(kù)集成技術(shù)數(shù)據(jù)庫(kù)集成技術(shù)可將不同類型的數(shù)據(jù)庫(kù)無(wú)縫連接，從而實(shí)現(xiàn)數(shù)據(jù)庫(kù)之間的數(shù)據(jù)交互和共享。主要采用了以下兩種方式：（1）FederationFederation是針對(duì)異構(gòu)數(shù)據(jù)庫(kù)集成的一個(gè)全新概念，基于Federation的異構(gòu)數(shù)據(jù)庫(kù)集成技術(shù)能夠有效打通異構(gòu)數(shù)據(jù)庫(kù)之間的數(shù)據(jù)隔離通道，實(shí)現(xiàn)數(shù)據(jù)的集成和共享。（2）ODBC/JDBCODBC和JDBC是兩種不同的數(shù)據(jù)庫(kù)訪問(wèn)方式，能夠?qū)崿F(xiàn)不同類型的數(shù)據(jù)庫(kù)之間的數(shù)據(jù)通信和信息共享。2.數(shù)據(jù)轉(zhuǎn)化技術(shù)數(shù)據(jù)轉(zhuǎn)化技術(shù)可以將不同類型的數(shù)據(jù)之間進(jìn)行格式轉(zhuǎn)換，解決數(shù)據(jù)之間的數(shù)據(jù)類型、數(shù)據(jù)結(jié)構(gòu)、編碼方式等差異，從而實(shí)現(xiàn)數(shù)據(jù)之間的交互和共享。主要采用了以下兩種方式:（1）XML/WebservicesXML和Webservices是兩種不同的數(shù)據(jù)格式和數(shù)據(jù)交互方式，能夠?qū)崿F(xiàn)數(shù)據(jù)的平臺(tái)無(wú)關(guān)性和易于擴(kuò)展性。（2）ETLETL是一種數(shù)據(jù)轉(zhuǎn)換和數(shù)據(jù)集成技術(shù)，通過(guò)將不同類型的數(shù)據(jù)進(jìn)行抽取、轉(zhuǎn)換和加載，實(shí)現(xiàn)數(shù)據(jù)之間的交互和共享。三、研究思路根據(jù)目前的研究進(jìn)展，我們將繼續(xù)深入研究數(shù)據(jù)庫(kù)的異構(gòu)問(wèn)題，主要采用以下思路：1、集成技術(shù)的研究：研究Federation和ODBC/JDBC等集成技術(shù)的原理、特點(diǎn)和實(shí)現(xiàn)方式，探索適合異構(gòu)數(shù)據(jù)庫(kù)集成的技術(shù)方案。2、數(shù)據(jù)轉(zhuǎn)化技術(shù)的研究：研究XML/Webservices和ETL等數(shù)據(jù)轉(zhuǎn)化技術(shù)的原理、特點(diǎn)和實(shí)現(xiàn)方式，探索適合異構(gòu)數(shù)據(jù)轉(zhuǎn)化的技術(shù)方案。3、實(shí)驗(yàn)驗(yàn)證：通過(guò)各種實(shí)驗(yàn)手段驗(yàn)證集成技術(shù)和數(shù)據(jù)轉(zhuǎn)化技術(shù)的可行性和實(shí)用性，從而為數(shù)據(jù)庫(kù)的異構(gòu)問(wèn)題提供有效的技術(shù)方案和解決思路。四、結(jié)論數(shù)據(jù)庫(kù)的異構(gòu)問(wèn)題是數(shù)據(jù)孤島和數(shù)據(jù)壁壘的主要原因之一，解決數(shù)據(jù)庫(kù)的異構(gòu)問(wèn)題是提高數(shù)據(jù)利用效益和數(shù)據(jù)質(zhì)量的必要途徑。本文通過(guò)對(duì)數(shù)據(jù)庫(kù)的異構(gòu)問(wèn)題