China-VO的發(fā)展方向課件

China-VO的發(fā)展趙永恒2003年8月China-VO的發(fā)展趙永恒1China-VO為中國天文學(xué)家提供使用國際數(shù)據(jù)的先進平臺和門戶從國際上獲取數(shù)據(jù)和相關(guān)技術(shù)將我們的數(shù)據(jù)提供給天文學(xué)界未來：LAMOST、SST、FAST目前：BATC、太陽磁場、216…過去：天文底片（？）培養(yǎng)新一代面向“虛擬天文臺”的科技隊伍公眾教育China-VO為中國天文學(xué)家提供使用國際數(shù)據(jù)的先進平臺和門2海量數(shù)據(jù)存儲與管理技術(shù)Linux+IDE硬盤+軟RAID技術(shù)2001年：

550GB服務(wù)器ADS鏡像站點2002年：4.5TB數(shù)據(jù)服務(wù)器建立了1TB多波段巡天數(shù)據(jù)庫（WDCforAstronomy）海量數(shù)據(jù)存儲與管理技術(shù)Linux+IDE硬盤+軟RA3高性能計算技術(shù)COMA機群：Linux+MPICH65個處理器、32.8GB內(nèi)存、2.56TBIDE硬盤峰值性能為950億次/秒浮點運算的Linpack性能為57.8Gflops在國內(nèi)超級計算機Top50中（包括商用機器）排名第22。已開展的工作包括：宇宙大尺度結(jié)構(gòu)及星系形成的數(shù)值模擬研究高階CDM+流體動力學(xué)模擬程序的并行化研究高性能計算技術(shù)COMA機群：Linux+MPICH4China-VO的原型巡天數(shù)據(jù)的在線服務(wù)本地查詢和交叉證認(rèn)定義天文對象和方法基于OGSA/Globus與WebService兼容：UDDI,WSDL,SOAP.每個數(shù)據(jù)庫都是一個GridService基于GridService的交叉證認(rèn)與望遠鏡實時數(shù)據(jù)的互聯(lián)可視化工具China-VO的原型巡天數(shù)據(jù)的在線服務(wù)5GridService流程UserApplicationNVSSStorageServiceProviderDatabaseFactoryminingFactoryCommunityRegistryDatabaseService2MASSDatabaseService...ComputeServiceProvider...DatabaseMiner12344567PublishVisit(jdbc)GridService流程UserNVSSStorage6體系結(jié)構(gòu)體系結(jié)構(gòu)7China-VO的發(fā)展方向課件8服務(wù)層（數(shù)據(jù)、存儲、計算）已解決數(shù)據(jù)服務(wù)：數(shù)據(jù)的封裝Data

VOTable未解決元數(shù)據(jù)服務(wù)：DNS-like?UCD多表聯(lián)合查詢：存儲空間服務(wù)：File,MyVO計算服務(wù)：網(wǎng)絡(luò)中心?服務(wù)層（數(shù)據(jù)、存儲、計算）已解決9傳輸層（OGSA）已解決Stream方式未解決File方式：GridFTP?URL?傳輸層（OGSA）已解決10應(yīng)用層已解決表=>圖未解決可視化工具：各種各樣（基于科學(xué)）基本工具：交叉證認(rèn)工具：數(shù)據(jù)挖掘工具：應(yīng)用層已解決11資源注冊與發(fā)現(xiàn)未解決數(shù)據(jù)：存儲：計算：工具：資源注冊與發(fā)現(xiàn)未解決12一般范例ConeSearch多表查詢可視化銀河系化學(xué)演化多表查詢計算程序（工具）可視化科研范例？科學(xué)教育一般范例ConeSearch13LAMOST的范例多波段天體物理（輸入星表）多表聯(lián)合查詢<=（工作星表）交叉證認(rèn)多參數(shù)空間的分類=>（輸入星表III）QSO,AGN,CV,XRB,…可視化光譜數(shù)據(jù)服務(wù)（輸出）獲取光譜（2dF,SDSS,…）=>（光譜自動分析）與自動分析系統(tǒng)的接口？光譜參數(shù)？LAMOST的范例多波段天體物理（輸入星表）14LAMOST&China-VOImagePrecessingLAMOSTInputCatalogueScientificResearchChina-VOIVOWorkingCataloguesSpectrumAnalysisLAMOST&China-VOImageInputCa15ThreeLayerGRIDAbstractionInformationGridKnowledgeGridComputation/DataGridDatatoKnowledgeControlAutomationE-Science本體論ontologyThreeLayerGRIDAbstractionIn16不斷擴展不斷擴展17China-VO的發(fā)展方向課件18China-VO的發(fā)展方向課件19接入方式OGSA接入遠程程序調(diào)用使用門戶接入方式OGSA接入20VO對Grid的功能需求基本的服務(wù)激活機制服務(wù)狀態(tài)表達與監(jiān)控服務(wù)間元數(shù)據(jù)傳遞機器可識別的服務(wù)描述統(tǒng)一的數(shù)據(jù)訪問接口文件傳輸能力數(shù)據(jù)庫格式動態(tài)轉(zhuǎn)換能力數(shù)據(jù)緩存服務(wù)注冊和發(fā)現(xiàn)機制元數(shù)據(jù)互操作能力（Ontology）/語義網(wǎng)數(shù)據(jù)、資源的訪問控制，用戶授權(quán)與認(rèn)證工作流支持動態(tài)的服務(wù)上下線管理VO對Grid的功能需求基本的服務(wù)激活機制數(shù)據(jù)緩存21特有的技術(shù)問題資源發(fā)現(xiàn)和注冊VORegistry天文數(shù)據(jù)查詢VOQueryLanguage(VOQL)VO數(shù)據(jù)格式VOTable/XML天文數(shù)據(jù)集的元數(shù)據(jù)UCD/VOOntology天文數(shù)據(jù)處理與分析服務(wù)VOServices特有的技術(shù)問題資源發(fā)現(xiàn)和注冊V22China-VO的信息技術(shù)基礎(chǔ)技術(shù)海量數(shù)據(jù)的存儲與管理技術(shù)高性能計算技術(shù)信息標(biāo)準(zhǔn)化數(shù)據(jù)格式（XML）：VOTable、AML等接口與協(xié)議：SOAP、WebService等網(wǎng)格技術(shù)OGSA/Globus等應(yīng)用技術(shù)數(shù)據(jù)自動分析技術(shù)新型統(tǒng)計分析技術(shù)數(shù)據(jù)挖掘與知識發(fā)現(xiàn)技術(shù)可視化技術(shù)China-VO的信息技術(shù)基礎(chǔ)技術(shù)23幾個原則遵循IVOA的標(biāo)準(zhǔn)要參與進去，要有聲音緊跟OGSA的發(fā)展需要追蹤和了解freeware軟件+廉價的硬件天文學(xué)：“窮人的科學(xué)”集群方式“在戰(zhàn)爭中學(xué)習(xí)戰(zhàn)爭”幾個原則遵循IVOA的標(biāo)準(zhǔn)24CalltoActionIfyoudodatavisualization:weneedyou

(andweknowit).Ifyoudodatabases:

hereissomedatayoucanpracticeon.Ifyoudodistributedsystems:

hereisafederationyoucanpracticeon.Ifyoudodatamining

herearedatasetstotestyouralgorithms.Ifyoudoastronomyeducationaloutreach

hereisatoolforyou.Theastronomersareverygood,andverysmart,andapleasuretoworkwith,and

thequestionsarecosmic,so…CalltoActionIfyoudodatav25謝謝！謝謝！26演講完畢，謝謝觀看！演講完畢，謝謝觀看！27China-VO的發(fā)展趙永恒2003年8月China-VO的發(fā)展趙永恒28China-VO為中國天文學(xué)家提供使用國際數(shù)據(jù)的先進平臺和門戶從國際上獲取數(shù)據(jù)和相關(guān)技術(shù)將我們的數(shù)據(jù)提供給天文學(xué)界未來：LAMOST、SST、FAST目前：BATC、太陽磁場、216…過去：天文底片（？）培養(yǎng)新一代面向“虛擬天文臺”的科技隊伍公眾教育China-VO為中國天文學(xué)家提供使用國際數(shù)據(jù)的先進平臺和門29海量數(shù)據(jù)存儲與管理技術(shù)Linux+IDE硬盤+軟RAID技術(shù)2001年：

550GB服務(wù)器ADS鏡像站點2002年：4.5TB數(shù)據(jù)服務(wù)器建立了1TB多波段巡天數(shù)據(jù)庫（WDCforAstronomy）海量數(shù)據(jù)存儲與管理技術(shù)Linux+IDE硬盤+軟RA30高性能計算技術(shù)COMA機群：Linux+MPICH65個處理器、32.8GB內(nèi)存、2.56TBIDE硬盤峰值性能為950億次/秒浮點運算的Linpack性能為57.8Gflops在國內(nèi)超級計算機Top50中（包括商用機器）排名第22。已開展的工作包括：宇宙大尺度結(jié)構(gòu)及星系形成的數(shù)值模擬研究高階CDM+流體動力學(xué)模擬程序的并行化研究高性能計算技術(shù)COMA機群：Linux+MPICH31China-VO的原型巡天數(shù)據(jù)的在線服務(wù)本地查詢和交叉證認(rèn)定義天文對象和方法基于OGSA/Globus與WebService兼容：UDDI,WSDL,SOAP.每個數(shù)據(jù)庫都是一個GridService基于GridService的交叉證認(rèn)與望遠鏡實時數(shù)據(jù)的互聯(lián)可視化工具China-VO的原型巡天數(shù)據(jù)的在線服務(wù)32GridService流程UserApplicationNVSSStorageServiceProviderDatabaseFactoryminingFactoryCommunityRegistryDatabaseService2MASSDatabaseService...ComputeServiceProvider...DatabaseMiner12344567PublishVisit(jdbc)GridService流程UserNVSSStorage33體系結(jié)構(gòu)體系結(jié)構(gòu)34China-VO的發(fā)展方向課件35服務(wù)層（數(shù)據(jù)、存儲、計算）已解決數(shù)據(jù)服務(wù)：數(shù)據(jù)的封裝Data

VOTable未解決元數(shù)據(jù)服務(wù)：DNS-like?UCD多表聯(lián)合查詢：存儲空間服務(wù)：File,MyVO計算服務(wù)：網(wǎng)絡(luò)中心?服務(wù)層（數(shù)據(jù)、存儲、計算）已解決36傳輸層（OGSA）已解決Stream方式未解決File方式：GridFTP?URL?傳輸層（OGSA）已解決37應(yīng)用層已解決表=>圖未解決可視化工具：各種各樣（基于科學(xué)）基本工具：交叉證認(rèn)工具：數(shù)據(jù)挖掘工具：應(yīng)用層已解決38資源注冊與發(fā)現(xiàn)未解決數(shù)據(jù)：存儲：計算：工具：資源注冊與發(fā)現(xiàn)未解決39一般范例ConeSearch多表查詢可視化銀河系化學(xué)演化多表查詢計算程序（工具）可視化科研范例？科學(xué)教育一般范例ConeSearch40LAMOST的范例多波段天體物理（輸入星表）多表聯(lián)合查詢<=（工作星表）交叉證認(rèn)多參數(shù)空間的分類=>（輸入星表III）QSO,AGN,CV,XRB,…可視化光譜數(shù)據(jù)服務(wù)（輸出）獲取光譜（2dF,SDSS,…）=>（光譜自動分析）與自動分析系統(tǒng)的接口？光譜參數(shù)？LAMOST的范例多波段天體物理（輸入星表）41LAMOST&China-VOImagePrecessingLAMOSTInputCatalogueScientificResearchChina-VOIVOWorkingCataloguesSpectrumAnalysisLAMOST&China-VOImageInputCa42ThreeLayerGRIDAbstractionInformationGridKnowledgeGridComputation/DataGridDatatoKnowledgeControlAutomationE-Science本體論ontologyThreeLayerGRIDAbstractionIn43不斷擴展不斷擴展44China-VO的發(fā)展方向課件45China-VO的發(fā)展方向課件46接入方式OGSA接入遠程程序調(diào)用使用門戶接入方式OGSA接入47VO對Grid的功能需求基本的服務(wù)激活機制服務(wù)狀態(tài)表達與監(jiān)控服務(wù)間元數(shù)據(jù)傳遞機器可識別的服務(wù)描述統(tǒng)一的數(shù)據(jù)訪問接口文件傳輸能力數(shù)據(jù)庫格式動態(tài)轉(zhuǎn)換能力數(shù)據(jù)緩存服務(wù)注冊和發(fā)現(xiàn)機制元數(shù)據(jù)互操作能力（Ontology）/語義網(wǎng)數(shù)據(jù)、資源的訪問控制，用戶授權(quán)與認(rèn)證工作流支持動態(tài)的服務(wù)上下線管理VO對Grid的功能需求基本的服務(wù)激活機制數(shù)據(jù)緩存48特有的技術(shù)問題資源發(fā)現(xiàn)和注冊VORegistry天文數(shù)據(jù)查詢VOQueryLanguage(VOQL)VO數(shù)據(jù)格式VOTable/XML天文數(shù)據(jù)集的元數(shù)據(jù)UCD/VOOntology天文數(shù)據(jù)處理與分析服務(wù)VOServices特有的技術(shù)問題資源發(fā)現(xiàn)和注冊V49China-VO的信息技術(shù)基礎(chǔ)技術(shù)海量數(shù)據(jù)的存儲與管理技術(shù)高性能計算技術(shù)信息標(biāo)準(zhǔn)化數(shù)據(jù)格式（XML）：VOTable、AML等接口與協(xié)議：SOAP、WebService等網(wǎng)格技術(shù)OGSA/Globus等應(yīng)用技術(shù)數(shù)據(jù)自動分析技術(shù)新型統(tǒng)計分析技術(shù)數(shù)據(jù)挖掘與