大數(shù)據(jù)技術(shù)在油氣勘探的應(yīng)用方案

1、2022-3-20Inspur group大數(shù)據(jù)技術(shù)在油氣勘探的應(yīng)用方案浪潮集團(tuán)行業(yè)應(yīng)用技術(shù)總監(jiān)浪潮集團(tuán)行業(yè)應(yīng)用技術(shù)總監(jiān) 鄭貴德鄭貴德22022-3-20Inspur group國(guó)際數(shù)據(jù)公司（IDC）的研究結(jié)果表明，整個(gè)人類文明所獲得的全部數(shù)據(jù)中，有90%是過去兩年內(nèi)產(chǎn)生的。而到了2020年，全世界所產(chǎn)生的數(shù)據(jù)規(guī)模將達(dá)到今天的44倍石油行業(yè)銷售ERP系統(tǒng)管理8600萬(wàn)噸/年的成品油銷售業(yè)務(wù)，年處理3450萬(wàn)張單據(jù)，勘探與生產(chǎn)方面有24萬(wàn)口油氣水井;煉油與化工方面有1119套煉化裝置業(yè)內(nèi)人士指出，“石油工業(yè)是信息工業(yè)”，很少有其他工業(yè)領(lǐng)域像石油工業(yè)這樣更依賴于數(shù)據(jù)社會(huì)趨勢(shì)社會(huì)趨勢(shì)行業(yè)趨勢(shì)行業(yè)趨勢(shì)

2、大數(shù)據(jù)時(shí)代大數(shù)據(jù)時(shí)代32022-3-20Inspur group數(shù)據(jù)量大：以地震波反射方式來收集海量數(shù)據(jù)為例，每次采集的二維數(shù)據(jù)可達(dá)12TB，三維數(shù)據(jù)可高達(dá)幾百TB甚至PB級(jí)，四維數(shù)據(jù)將更加龐大石油物理勘探的地震波法所得到的數(shù)據(jù)量非常龐大,是現(xiàn)今三大大型計(jì)算領(lǐng)域之一計(jì)算量大：以疊前時(shí)間偏移為例，一個(gè)地震道的輸出需要至少1000萬(wàn)道甚至更多（偏移孔徑?jīng)Q定）的輸入道，每一個(gè)點(diǎn)要做兩次均方根運(yùn)算以及兩次加法運(yùn)算，振幅補(bǔ)償兩次乘法運(yùn)算。以1毫秒采樣，6秒數(shù)據(jù)為例，實(shí)現(xiàn)一道偏移需要1000000 x60002(平方+加法+乘法)次數(shù)學(xué)運(yùn)算，計(jì)算量和需要處理的數(shù)據(jù)量都極其巨大！油氣勘探大數(shù)據(jù)油氣勘探大數(shù)據(jù)

3、42022-3-20Inspur group解決性能主要途徑解決性能主要途徑小型機(jī)集群系統(tǒng)偏移算法遺傳算法有限元法波動(dòng)方程算法.并行計(jì)算并行計(jì)算傳統(tǒng)計(jì)算模式傳統(tǒng)計(jì)算模式擴(kuò)展能力局限投入成本高并行計(jì)算效率提高難空間占用大關(guān)注問題關(guān)注問題發(fā)展趨勢(shì)發(fā)展趨勢(shì)? 大數(shù)據(jù)技術(shù)52022-3-20Inspur group油氣勘探分布并行計(jì)算解決方案油氣勘探分布并行計(jì)算解決方案62022-3-20Inspur group油氣勘探分布并行計(jì)算網(wǎng)絡(luò)拓?fù)浣Y(jié)構(gòu)油氣勘探分布并行計(jì)算網(wǎng)絡(luò)拓?fù)浣Y(jié)構(gòu)NameNodeDataNodeMasterNodeRegionNode72022-3-20Inspur group并行分布技術(shù)

4、架構(gòu)優(yōu)勢(shì)并行分布技術(shù)架構(gòu)優(yōu)勢(shì)高性能：自動(dòng)實(shí)現(xiàn)大規(guī)模數(shù)據(jù)分布并行計(jì)算，高效實(shí)現(xiàn)大規(guī)模數(shù)據(jù)讀取高可擴(kuò)：在可用的計(jì)算機(jī)集簇間分配數(shù)據(jù)完成計(jì)算任務(wù)，這些集簇可以方便地?cái)U(kuò)展到數(shù)以千計(jì)的節(jié)點(diǎn)中高效性：能夠在節(jié)點(diǎn)之間動(dòng)態(tài)地移動(dòng)數(shù)據(jù)，以保證各個(gè)節(jié)點(diǎn)的動(dòng)態(tài)平衡，處理速度非?？旄呷蒎e(cuò)性：自動(dòng)保存數(shù)據(jù)的多份副本，并且能夠自動(dòng)將失敗的任務(wù)重新分配經(jīng)濟(jì)性： 系統(tǒng)軟件開源，應(yīng)用軟件開發(fā)簡(jiǎn)化。 通過X86系列組成的集群系統(tǒng)，和小型機(jī)相比成本優(yōu)勢(shì)明顯82022-3-20Inspur group基于大數(shù)據(jù)一體機(jī)的油氣勘探技術(shù)架構(gòu)示意基于大數(shù)據(jù)一體機(jī)的油氣勘探技術(shù)架構(gòu)示意92022-3-20Inspur group大數(shù)據(jù)一體機(jī)物

5、理示意大數(shù)據(jù)一體機(jī)物理示意可根據(jù)負(fù)載需求擴(kuò)展節(jié)點(diǎn)，理論上數(shù)據(jù)節(jié)點(diǎn)數(shù)量可擴(kuò)至4000個(gè)，存儲(chǔ)容量可相應(yīng)增長(zhǎng)，至少滿足PB級(jí)大數(shù)據(jù)分布存儲(chǔ)在Hadoop技術(shù)框架的基礎(chǔ)上提供并行處理及IO優(yōu)化可實(shí)現(xiàn)戶外計(jì)算應(yīng)用單節(jié)點(diǎn)可支持配置：8路CPU, 128G內(nèi)存，32TB硬盤10浪潮大數(shù)據(jù)應(yīng)用浪潮大數(shù)據(jù)應(yīng)用- -卡口與智能交通卡口與智能交通監(jiān)控卡口監(jiān)控卡口1監(jiān)控卡口監(jiān)控卡口2監(jiān)控卡口監(jiān)控卡口3監(jiān)控卡口監(jiān)控卡口41億億/天車天車行軌跡行軌跡2300萬(wàn)萬(wàn)車輛信車輛信息息9000千千萬(wàn)人口萬(wàn)人口3000萬(wàn)駕萬(wàn)駕駛員駛員卡口信息：牌號(hào)：魯F123*車型：解放j6p顏色：藍(lán)色位置：濟(jì)南經(jīng)十山大路口方向：自西向東時(shí)間：

6、2013.2.5 8:45:30全省17地市交通卡口每天采集行車記錄數(shù)將近1億條云計(jì)算數(shù)據(jù)中心根據(jù)牌號(hào)比對(duì)車輛行駛信根據(jù)牌號(hào)比對(duì)車輛行駛信息查找嫌疑車輛息查找嫌疑車輛監(jiān)控卡口監(jiān)控卡口.大數(shù)據(jù)的分析計(jì)算車牌號(hào)車牌號(hào)車型車型顏色顏色距離距離.卡口信息卡口信息卡口信息卡口信息卡口信息數(shù)據(jù)調(diào)取數(shù)據(jù)調(diào)取計(jì)算結(jié)果11浪潮大數(shù)據(jù)應(yīng)用浪潮大數(shù)據(jù)應(yīng)用- -推薦服務(wù)推薦服務(wù)12浪潮大數(shù)據(jù)應(yīng)用浪潮大數(shù)據(jù)應(yīng)用- -淘寶天貓雙淘寶天貓雙1111數(shù)據(jù)分析數(shù)據(jù)分析稅務(wù)云平臺(tái)，350.4億元天貓商城 241.9億元淘寶集市108.5億元阿里官方公布，淘寶和天貓銷售額350.19億2013年全國(guó)雙十一數(shù)據(jù)C2C模式暫不收稅，稅

7、務(wù)云平臺(tái)僅采集天貓商城交易明細(xì)數(shù)據(jù)。電商大數(shù)據(jù)采集云平臺(tái)雙十一運(yùn)行情況13浪潮大數(shù)據(jù)應(yīng)用浪潮大數(shù)據(jù)應(yīng)用- -電商平臺(tái)稅務(wù)局端數(shù)據(jù)比電商平臺(tái)稅務(wù)局端數(shù)據(jù)比對(duì)對(duì)納稅人稅號(hào)納稅人名稱網(wǎng)店不含稅銷售額（元）申報(bào)額（元）差異率33026458 杭州向上電子商務(wù)有限公司239,257,654 108,374 100%33061404 杭州手拉手電子商務(wù)有限公司91,847,718 0 100%33090156 杭州共海服飾有限公司5,372,567 9,089 100%33087203 杭州秋果服飾有限公司5,251,854 690 100%33045893 杭州簡(jiǎn)正電子商務(wù)有限公司4,467,420 58,252 99%33041333杭州蘭帕達(dá)體育用品有限公司4,418,967 111,474 97%3304745X 杭州維歐艾服飾有限公司23,915,545 7,251,2