資料挖掘網(wǎng)路服務(wù)系統(tǒng)之探討ppt課件

1、目錄目錄 1.緒論 2.文獻(xiàn)探討 3.研討方法 4.系統(tǒng)實(shí)作 5.結(jié)論1.緒論緒論-研討動(dòng)機(jī)研討動(dòng)機(jī) 目前市面上已有許多獨(dú)軟體開(kāi)發(fā)廠商以及應(yīng)用軟體服務(wù)供應(yīng)商針對(duì)普通企業(yè)組織在資發(fā)掘上的需求，推出套裝資發(fā)掘軟體或是資發(fā)掘相關(guān)的服務(wù)與技術(shù)援助。 企業(yè)在實(shí)際運(yùn)用現(xiàn)有的資料發(fā)掘軟體與服務(wù)時(shí)經(jīng)常面臨以下的問(wèn)題：一、企業(yè)部門間異質(zhì)系統(tǒng)的整合與資料傳輸?shù)南嗳菪?問(wèn)題二、傳統(tǒng)資料發(fā)掘軟體缺乏因應(yīng)運(yùn)用者的需求而進(jìn)行 流程彈性調(diào)整的才干三、軟體或服務(wù)的整合及維護(hù)本錢過(guò)高研討目的研討目的 為解決以上的問(wèn)題，我們將提出一個(gè)具有跨平臺(tái)能，而且具有彈性程調(diào)整能的資發(fā)掘系統(tǒng)架構(gòu)。具體而言，本研討的主要目的是在解決目前企業(yè)所

2、面到的以下問(wèn)題： 一、抑制質(zhì)系統(tǒng)與資交換格式的問(wèn)題 二、提供彈性的資發(fā)掘程 三、低軟體整合與維護(hù)本錢2.文獻(xiàn)探討文獻(xiàn)探討-資發(fā)掘資發(fā)掘 資資(Data)、資訊、資訊(Information)與知與知(Knowledge)等三者的定義與之間的關(guān)係。等三者的定義與之間的關(guān)係。資發(fā)掘的相關(guān)技術(shù)資發(fā)掘的相關(guān)技術(shù) 一、分 (Classification)： 分是一種監(jiān)督式學(xué)習(xí)(Supervised Learning)，它的定義為根據(jù)一些已經(jīng)有別的史資分析它們的一切特徵，再依據(jù)這些特徵對(duì)未分或是新的資進(jìn)歸，如銀根據(jù)某些規(guī)則將其顧客區(qū)分為高貢獻(xiàn)族群、低貢獻(xiàn)族群等別。 二、關(guān)法則 (Association R

3、ule)： 關(guān)法則的目的是從一堆看似無(wú)關(guān)的資中，發(fā)掘出同項(xiàng)目之間發(fā)生的關(guān)性，探討在同一事件中某一項(xiàng)目出現(xiàn)時(shí)，另一個(gè)項(xiàng)目也在該事件出現(xiàn)的機(jī) 三、群集 (Clustering)： 群集就是將一大筆資根據(jù)它們彼此間的類似程，將似的資分在一群之中，而區(qū)隔類似的資。資發(fā)掘的步驟資發(fā)掘的步驟 學(xué)者學(xué)者Fong 等人等人(2019)認(rèn)為資發(fā)掘的過(guò)程普通可分為確認(rèn)為資發(fā)掘的過(guò)程普通可分為確認(rèn)發(fā)掘目標(biāo)、資選擇、資準(zhǔn)備、資轉(zhuǎn)換、資儲(chǔ)存、認(rèn)發(fā)掘目標(biāo)、資選擇、資準(zhǔn)備、資轉(zhuǎn)換、資儲(chǔ)存、資發(fā)掘與結(jié)果評(píng)估等七大步驟資發(fā)掘與結(jié)果評(píng)估等七大步驟資前處資前處資清資清資整合資整合資轉(zhuǎn)換資轉(zhuǎn)換資簡(jiǎn)化資簡(jiǎn)化資發(fā)掘的應(yīng)用資發(fā)掘的應(yīng)用-1

4、 資發(fā)掘的相關(guān)應(yīng)用相當(dāng)?shù)膹V泛與多樣化，在許資發(fā)掘的相關(guān)應(yīng)用相當(dāng)?shù)膹V泛與多樣化，在許多域如生物醫(yī)學(xué)域、財(cái)務(wù)融業(yè)、製造售多域如生物醫(yī)學(xué)域、財(cái)務(wù)融業(yè)、製造售業(yè)等各方面可以發(fā)現(xiàn)資發(fā)掘的相關(guān)應(yīng)用與研業(yè)等各方面可以發(fā)現(xiàn)資發(fā)掘的相關(guān)應(yīng)用與研討。以生物醫(yī)學(xué)域?yàn)?，近十生物醫(yī)學(xué)討。以生物醫(yī)學(xué)域?yàn)?，近十生物醫(yī)學(xué)域的相關(guān)研討呈現(xiàn)爆炸性的成長(zhǎng)，從新藥物的開(kāi)域的相關(guān)研討呈現(xiàn)爆炸性的成長(zhǎng)，從新藥物的開(kāi)發(fā)、癌癥法的研討到人發(fā)、癌癥法的研討到人DNA 序解析等研討序解析等研討域，均藉助資訊科技與資發(fā)掘技術(shù)處龐域，均藉助資訊科技與資發(fā)掘技術(shù)處龐大的資。大的資。資發(fā)掘的應(yīng)用資發(fā)掘的應(yīng)用-2 資發(fā)掘技術(shù)出現(xiàn)過(guò)短短十多，但卻能迅速資發(fā)

5、掘技術(shù)出現(xiàn)過(guò)短短十多，但卻能迅速地應(yīng)用於各種學(xué)術(shù)與商業(yè)域，學(xué)者地應(yīng)用於各種學(xué)術(shù)與商業(yè)域，學(xué)者Berry and Linoff(2019)經(jīng)過(guò)規(guī)納分析之後，認(rèn)為以下五個(gè)經(jīng)過(guò)規(guī)納分析之後，認(rèn)為以下五個(gè)要素促成資發(fā)掘技術(shù)的崛起：要素促成資發(fā)掘技術(shù)的崛起： 一、大資的獲得難低一、大資的獲得難低 二、資倉(cāng)儲(chǔ)系統(tǒng)的發(fā)展成熟二、資倉(cāng)儲(chǔ)系統(tǒng)的發(fā)展成熟 三、電腦運(yùn)算速的加強(qiáng)與網(wǎng)際網(wǎng)的發(fā)展三、電腦運(yùn)算速的加強(qiáng)與網(wǎng)際網(wǎng)的發(fā)展 四、全球化商業(yè)競(jìng)爭(zhēng)的壓四、全球化商業(yè)競(jìng)爭(zhēng)的壓 五、資發(fā)掘軟體的獲得方五、資發(fā)掘軟體的獲得方企業(yè)應(yīng)用整合與網(wǎng)服務(wù)企業(yè)應(yīng)用整合與網(wǎng)服務(wù) 學(xué)者學(xué)者Coyle(2019)則認(rèn)為企業(yè)組織可以採(cǎi)取以下三種

6、則認(rèn)為企業(yè)組織可以採(cǎi)取以下三種新技術(shù)因應(yīng)目前劇競(jìng)爭(zhēng)的商業(yè)環(huán)境，它們分別為新技術(shù)因應(yīng)目前劇競(jìng)爭(zhēng)的商業(yè)環(huán)境，它們分別為 1.可延伸式標(biāo)記語(yǔ)言可延伸式標(biāo)記語(yǔ)言 2.網(wǎng)服務(wù)網(wǎng)服務(wù) 3.無(wú)線技術(shù)無(wú)線技術(shù) 質(zhì)系統(tǒng)與資訊整合質(zhì)系統(tǒng)與資訊整合 企業(yè)組織對(duì)於資訊整合的需求已從企業(yè)應(yīng)用系統(tǒng)的整合提企業(yè)組織對(duì)於資訊整合的需求已從企業(yè)應(yīng)用系統(tǒng)的整合提升至廣泛的資訊源的整合，微軟升至廣泛的資訊源的整合，微軟(2019)認(rèn)為資訊系統(tǒng)認(rèn)為資訊系統(tǒng)整合的演進(jìn)大致上可分成以下三大階段：整合的演進(jìn)大致上可分成以下三大階段： 一、資整合一、資整合 二、應(yīng)用程式整合二、應(yīng)用程式整合 三、服務(wù)整合三、服務(wù)整合 這三個(gè)資訊整合的階段清楚

7、地表達(dá)出目前企業(yè)組織在系統(tǒng)這三個(gè)資訊整合的階段清楚地表達(dá)出目前企業(yè)組織在系統(tǒng)整合與資交換這大議題中所面到的限制所在，以及整合與資交換這大議題中所面到的限制所在，以及在同階段中整合方式的差之處。在同階段中整合方式的差之處。企業(yè)應(yīng)用整合企業(yè)應(yīng)用整合 企業(yè)應(yīng)用整合企業(yè)應(yīng)用整合(Enterprise Application Integration; EAI)的發(fā)展是提供企業(yè)組織一套完好系統(tǒng)整合架構(gòu)的解決方案，的發(fā)展是提供企業(yè)組織一套完好系統(tǒng)整合架構(gòu)的解決方案，以達(dá)成企業(yè)資訊的整合與分享。以達(dá)成企業(yè)資訊的整合與分享。 企業(yè)組織應(yīng)用企業(yè)組織應(yīng)用EAI 進(jìn)企業(yè)內(nèi)部的資訊整合自以下三個(gè)進(jìn)企業(yè)內(nèi)部的資訊整合自以

8、下三個(gè)要素：要素： 一、電子商務(wù)一、電子商務(wù) 二、企業(yè)合併與組織功能的強(qiáng)化二、企業(yè)合併與組織功能的強(qiáng)化 三、企業(yè)資源規(guī)劃三、企業(yè)資源規(guī)劃 雖然雖然EAI 是以企業(yè)主體為出發(fā)點(diǎn)，強(qiáng)調(diào)企業(yè)程與資訊是以企業(yè)主體為出發(fā)點(diǎn)，強(qiáng)調(diào)企業(yè)程與資訊系統(tǒng)之間的整合與自動(dòng)化，藉著整體採(cǎi)用單一系統(tǒng)標(biāo)準(zhǔn)及軟系統(tǒng)之間的整合與自動(dòng)化，藉著整體採(cǎi)用單一系統(tǒng)標(biāo)準(zhǔn)及軟體達(dá)成企業(yè)組織內(nèi)部應(yīng)用程式的整合，但是所必須付出的體達(dá)成企業(yè)組織內(nèi)部應(yīng)用程式的整合，但是所必須付出的本錢依舊居高下。而為添加企業(yè)競(jìng)爭(zhēng)優(yōu)勢(shì)，與協(xié)作夥伴本錢依舊居高下。而為添加企業(yè)競(jìng)爭(zhēng)優(yōu)勢(shì)，與協(xié)作夥伴以及顧客之間的資訊整合在所難免，因此，企業(yè)資訊整合的以及顧客之間的資訊

9、整合在所難免，因此，企業(yè)資訊整合的發(fā)展，除必須以服務(wù)為導(dǎo)向外，也必須跳脫特定標(biāo)準(zhǔn)或介發(fā)展，除必須以服務(wù)為導(dǎo)向外，也必須跳脫特定標(biāo)準(zhǔn)或介面的限制，而保有系統(tǒng)的彈性以及未擴(kuò)充的能。面的限制，而保有系統(tǒng)的彈性以及未擴(kuò)充的能。網(wǎng)服務(wù)的應(yīng)用網(wǎng)服務(wù)的應(yīng)用 由於Web Service 具有即時(shí)、彈性、標(biāo)準(zhǔn)化等特征，目前許多廠商紛紛開(kāi)始將Web Service 的相關(guān)技術(shù)與其本來(lái)的域進(jìn)整合。 Web Service 在資訊技術(shù)(IT)域的應(yīng)用大致上有以下所述的四個(gè)方面： 一、入口網(wǎng)站 二、企業(yè)應(yīng)用程式整合 三、分散式運(yùn)算 四、應(yīng)用程式服務(wù)提供者與獨(dú)軟體開(kāi)發(fā)商3.研討方法研討方法 本研討將以本研討將以Web S

10、ervice 架構(gòu)為基礎(chǔ)，將資架構(gòu)為基礎(chǔ)，將資發(fā)掘過(guò)程中的程序視為由一系的發(fā)掘過(guò)程中的程序視為由一系的Web Services 所構(gòu)成，並透過(guò)動(dòng)態(tài)任務(wù)程的概，所構(gòu)成，並透過(guò)動(dòng)態(tài)任務(wù)程的概，以敘述以敘述Web Service 程的程的BPEL4WS 語(yǔ)法，提語(yǔ)法，提供服務(wù)運(yùn)用者得以根據(jù)實(shí)際上的需求自編排資供服務(wù)運(yùn)用者得以根據(jù)實(shí)際上的需求自編排資發(fā)掘發(fā)掘Web Service 的整體程，透過(guò)程中各的整體程，透過(guò)程中各個(gè)個(gè)Web Service 的執(zhí)達(dá)成運(yùn)用者的目標(biāo)。的執(zhí)達(dá)成運(yùn)用者的目標(biāo)。系統(tǒng)概系統(tǒng)概-1 本研討所提出之系統(tǒng)架構(gòu)是考W3C所提出之服務(wù)導(dǎo)向架構(gòu)的概與根本架構(gòu)修正而。 為達(dá)成SOA 的遠(yuǎn)

11、景，企業(yè)組織必須將系統(tǒng)或應(yīng)用程式加以分割成為許多具有同功能特性的分散式子系統(tǒng)模組，這些分散於企業(yè)組織內(nèi)外部的子系統(tǒng)模組必須要援助統(tǒng)一的共通性標(biāo)準(zhǔn)，如此一才干使得資訊毫無(wú)阻礙的在系統(tǒng)中傳遞，達(dá)成系統(tǒng)整合的目的。目前業(yè)界對(duì)於SOA架構(gòu)的作法是將應(yīng)用程式與系統(tǒng)建構(gòu)在網(wǎng)際網(wǎng)上，也就是將應(yīng)用程式與系統(tǒng)加以網(wǎng)化，而Web Service 架構(gòu)正是目前SOA 架構(gòu)中最新的作法。系統(tǒng)概系統(tǒng)概-2 W3C 所提出SOA 之根本架構(gòu)圖4.實(shí)作實(shí)作-範(fàn)例流程實(shí)作步驟過(guò)程範(fàn)例流程實(shí)作步驟過(guò)程以下為三種不同品種蝴蝶花(Iris)之萼片與花瓣(Petal)的長(zhǎng)度與寬度數(shù)值之集合 本步驟中所呼叫的遠(yuǎn)端Web Service

12、採(cǎi)用的分群演算法為K-Means。 K-Means是屬於一種直接將資料集合進(jìn)行分割成為數(shù)個(gè)相互間無(wú)關(guān)聯(lián)的目標(biāo)群集，屬最根本且典型的分割式群集演算法。此演算法的目的是將資料集合中之資料物件分割成為數(shù)個(gè)群集，而群集的結(jié)果須滿足以下條件： 1.每個(gè)群集中至少要有一個(gè)以上的物件 2.每個(gè)物件須完全的歸屬於某個(gè)群集 3.每個(gè)物件與其所歸屬的群集質(zhì)心間的歐基理德 距離會(huì)小於與其他群集質(zhì)心間的距離 我們可根據(jù)其所在位置、參與流程的目的與方法，將他們分為三種角色： 1.具資料發(fā)掘需求的系統(tǒng)運(yùn)用者，也就是流程設(shè)計(jì)者與流程運(yùn)用者 2.於網(wǎng)際網(wǎng)路上提供對(duì)資料庫(kù)進(jìn)行資料擷取和分群演算等Web Services的服務(wù)提

13、供者 3.作為上述兩者間的資料傳輸橋樑，由流程設(shè)計(jì)者所設(shè)計(jì)規(guī)劃完成的IrisFlow等5.結(jié)論結(jié)論此研討的貢獻(xiàn)可以歸納如以下幾點(diǎn)：此研討的貢獻(xiàn)可以歸納如以下幾點(diǎn)：1.導(dǎo)入導(dǎo)入Web Service與與XML相關(guān)技術(shù)做基礎(chǔ)，抑制在相關(guān)技術(shù)做基礎(chǔ)，抑制在傳統(tǒng)資料發(fā)掘流程中所遇到的資料相容性問(wèn)題傳統(tǒng)資料發(fā)掘流程中所遇到的資料相容性問(wèn)題2.以任務(wù)流程的觀念做基礎(chǔ)，結(jié)合以任務(wù)流程的觀念做基礎(chǔ)，結(jié)合Web Service流程流程描畫語(yǔ)言描畫語(yǔ)言BPEL4WS，有系統(tǒng)的提供在資料發(fā)掘流程，有系統(tǒng)的提供在資料發(fā)掘流程中關(guān)於活動(dòng)、流程順序等各方面的細(xì)節(jié)描畫中關(guān)於活動(dòng)、流程順序等各方面的細(xì)節(jié)描畫3.在資料發(fā)掘流程中各步驟的演算活動(dòng)是由多個(gè)功能在資料發(fā)掘流程中各步驟的演算活動(dòng)是由多個(gè)功能各異的各異的Web Service元件所組成，在日後因需求改變?cè)M成，在日後因需求改變而使資料發(fā)掘流程需進(jìn)行更新和修正時(shí)，較傳統(tǒng)資料而使資料發(fā)掘流程需進(jìn)行更新和修正時(shí)，較傳統(tǒng)資料發(fā)掘軟體更具有流程變動(dòng)上的彈性發(fā)掘軟體更具有流程變動(dòng)上的彈性4.以統(tǒng)一且公開(kāi)的資料發(fā)掘方式描畫語(yǔ)言以統(tǒng)一且公開(kāi)的