大數(shù)據(jù)時代的數(shù)據(jù)挖掘技術.docx

大數(shù)據(jù)時代的數(shù)據(jù)挖掘技術【摘要】隨著大數(shù)據(jù)時代的到來，在大數(shù)據(jù)觀念不斷提出的今天，加強數(shù)據(jù)大數(shù)據(jù)挖掘及時的應用已成為大勢所趨。那么在這一過程中，我們必須掌握大數(shù)據(jù)與數(shù)據(jù)挖掘的內涵，并對數(shù)據(jù)挖掘技術進行分析，從而明確大數(shù)據(jù)時代下數(shù)據(jù)挖掘技術的應用領域，促進各項數(shù)據(jù)的處理，提高大數(shù)據(jù)處理能力?！娟P鍵詞】大數(shù)據(jù)時代；數(shù)據(jù)挖掘技術；應用大數(shù)據(jù)時代下的數(shù)據(jù)處理技術要求更高，所以要想確保數(shù)據(jù)處理成效得到提升，就必須切實加強數(shù)據(jù)挖掘技術的應用，才能更好地促進數(shù)據(jù)處理職能的轉變，提高數(shù)據(jù)處理效率，以下就大數(shù)據(jù)時代下的數(shù)據(jù)挖掘技術做出如下分析。1.大數(shù)據(jù)與數(shù)據(jù)挖掘的內涵分析近年來，隨著云計算和物聯(lián)網(wǎng)概念的提出，信息技術得到了前所未有的發(fā)展，而大數(shù)據(jù)則是在此基礎上對現(xiàn)代信息技術革命的又一次顛覆，所以大數(shù)據(jù)技術主要是從多種巨量的數(shù)據(jù)中快速的挖掘和獲取有價值的信息技術，因而在云時代的今天，大數(shù)據(jù)技術已經(jīng)被我們所關注，所以數(shù)據(jù)挖掘技術成為最為關鍵的技術。尤其是在當前在日常信息關聯(lián)和處理中越來越離不開數(shù)據(jù)挖掘技術和信息技術的支持。大數(shù)據(jù)，而主要是對全球的數(shù)據(jù)量較大的一個概括，且每年的數(shù)據(jù)增長速度較快。而數(shù)據(jù)挖掘，主要是從多種模糊而又隨機、大量而又復雜且不規(guī)則的數(shù)據(jù)中，獲得有用的信息知識，從數(shù)據(jù)庫中抽絲剝繭、轉換分析，從而掌握其潛在價值與規(guī)律1。2.大數(shù)據(jù)時代下數(shù)據(jù)挖掘技術的核心-分析方法數(shù)據(jù)挖掘的過程實際就是對數(shù)據(jù)進行分析和處理，所以其核心就在于數(shù)據(jù)的分析方法。要想確保分析方法的科學性，就必須確保所采用算法的科學性和可靠性，獲取數(shù)據(jù)潛在規(guī)律，并采取多元化的分析方法促進問題的解決和優(yōu)化。以下就幾種常見的數(shù)據(jù)分析方法做出簡要的說明。一是歸類法，主要是將沒有指向和不確定且抽象的數(shù)據(jù)信息予以集中，并對集中后的數(shù)據(jù)實施分類整理和編輯處理，從而確保所形成的數(shù)據(jù)源具有特征一致、表現(xiàn)相同的特點，從而為加強對其的研究提供便利。所以這一分析方法能有效的滿足各種數(shù)據(jù)信息處理。二是關聯(lián)法，由于不同數(shù)據(jù)間存在的關聯(lián)性較為隱蔽，采取人力往往難以找出其信息特征，所以需要預先結合信息關聯(lián)的表現(xiàn)，對數(shù)據(jù)關聯(lián)管理方案進行制定，從而完成基于某種目的的前提下對信息進行處理，所以其主要是在一些信息處理要求高和任務較為復雜的信息處理工作之中。三是特征法，由于數(shù)據(jù)資源的應用范圍較廣，所以需要對其特征進行挖掘。也就是采用某一種技術，將具有相同特征的數(shù)據(jù)進行集中。例如采用人工神經(jīng)網(wǎng)絡技術時，主要是對大批量復雜的數(shù)據(jù)分析，對非常復雜的模式進行抽取或者對其趨勢進行分析。而采取遺傳算法，則主要是對其他評估算法的適合度進行評估，并結合生物進化的原理，對信息數(shù)據(jù)的成長過程進行虛擬和假設，從而組建出半虛擬、半真實的信息資源。再如可視化技術則是為數(shù)據(jù)挖掘提供輔助，采取多種方式對數(shù)據(jù)的挖掘進行指導和表達3。3.大數(shù)據(jù)時代數(shù)據(jù)挖掘技術要點的分析3.1數(shù)據(jù)挖掘技術流程分析在數(shù)據(jù)挖掘過程中，其技術流程主要是以下幾點：首先做好數(shù)據(jù)準備工作，主要是在挖掘數(shù)據(jù)之前，就需要對目標數(shù)據(jù)進行準確的定位，在尋找和挖掘數(shù)據(jù)之前，必須知道自身所需的數(shù)據(jù)類型，才能避免數(shù)據(jù)挖掘的盲目性，在數(shù)據(jù)準備時，應根據(jù)系統(tǒng)的提示進行操作，在數(shù)據(jù)庫中輸入檢索條件和目標，對數(shù)據(jù)信息資源進行分類和清理，以及編輯和預處理。其次是在數(shù)據(jù)挖掘過程中，由于目標數(shù)據(jù)信息已經(jīng)被預處理，所以就需要在挖掘處理過程中將其高效正確的應用到管理機制之中，因而數(shù)據(jù)挖掘的過程十分重要，所以必須加強對其的處理。例如在數(shù)據(jù)挖掘中，我們可以結合數(shù)據(jù)挖掘目標要求，針對性的選取科學而又合適的計算和分析方法，對數(shù)據(jù)信息特征與應用價值等進行尋找和歸納。當然，也可以結合程序應用的需要，對數(shù)據(jù)區(qū)域進行固定，并在固定的數(shù)據(jù)區(qū)域內分類的挖掘數(shù)據(jù)，從而得到更具深度和內涵以及價值的數(shù)據(jù)信息資源，并就挖掘到的數(shù)據(jù)結果進行分析和解釋，從結果中將具有使用價值和意義的規(guī)律進行提取，并還原成便于理解的數(shù)據(jù)語言。最后是切實加強管理和計算等專業(yè)知識的應用，將數(shù)據(jù)挖掘技術實施中進行的總結和提取所獲得的數(shù)據(jù)信息與評估結果在現(xiàn)實之中應用，從而對某個思想、決策是否正確和科學進行判斷，最終體現(xiàn)出數(shù)據(jù)挖掘及時的應用價值。3.2挖掘后的數(shù)據(jù)信息資源分析若僅僅是通過環(huán)境和背景實現(xiàn)數(shù)據(jù)挖掘技術的升級轉型，那么其在合理性和科學性方面勢必會存在一定的欠缺，所以在形成網(wǎng)絡信息化的環(huán)境時，我們應綜合考慮社會經(jīng)濟的發(fā)展以及科技和文化因素帶來的影響，以及其在未來發(fā)展中的變化趨勢，這樣才能更好地促進數(shù)據(jù)挖掘技術職能的轉變，促進其最大化的滿足其應用成效的發(fā)揮，也能有效的促進其職能作用的發(fā)揮。這主要是因為數(shù)據(jù)信息資源在挖掘后，其自身的職能作用將變得更加豐富，所以在信息技術環(huán)節(jié)下的數(shù)據(jù)挖掘技術隨著限定條件的變化，而將數(shù)據(jù)挖掘信息應用于技術管理和決策管理之中，從而更好地彰顯企業(yè)在經(jīng)濟活動中的物質性質與價值變化趨勢，并結合數(shù)據(jù)變化特點和具體的表現(xiàn)規(guī)律，從而將數(shù)據(jù)信息的基本要素、質量特點、管理要求等展示出來，所以其表現(xiàn)的形式十分豐富。因而在數(shù)據(jù)挖掘之后的信息在職能范圍和表現(xiàn)形式方式均得到了豐富和拓展，而這也在一定程度上體現(xiàn)了網(wǎng)絡擬定目標服務具有較強的完整性，且屬于特殊的個體物品，同時也是對傳統(tǒng)數(shù)據(jù)挖掘技術的創(chuàng)新和發(fā)展，從而更好地滿足當前大數(shù)據(jù)時代對信息進行數(shù)據(jù)化的處理，并對不同種類業(yè)務進行整合和優(yōu)化，從而促進數(shù)據(jù)挖掘技術服務的一體化水平。3.3大數(shù)據(jù)背景下的數(shù)據(jù)挖掘技術應注重信息失真的控制數(shù)據(jù)挖掘技術的信息主要是源于大數(shù)據(jù)和社會，所以在當前數(shù)據(jù)挖掘技術需求不斷加大的今天，為了更好地促進所挖掘數(shù)據(jù)信息的真實性，促進其個性化職能的發(fā)揮，必須在大數(shù)據(jù)背景下注重信息失真的控制，切實做好數(shù)據(jù)挖掘技術管理的各項工作。這就需要考慮如何確保數(shù)據(jù)挖掘技術在大數(shù)據(jù)背景下的職能得到有效的發(fā)揮，盡可能地促進數(shù)據(jù)挖掘技術信息資源的升級和轉型，以大數(shù)據(jù)背景為載體，促進整個業(yè)務和技術操作流程的一體化，從而更好地將所有數(shù)據(jù)資源的消耗和變化以及管理的科學性和有效性，這樣我們就能及時的找到資源的消耗源頭，從而更好地對數(shù)據(jù)資源的消耗效益進行評價，最終促進業(yè)務流程的優(yōu)化，并結合大數(shù)據(jù)背景對數(shù)據(jù)挖掘技術的職能進行拓展，促進其外部信息與內部信息的合作，對數(shù)據(jù)挖掘技術信息的職能進行有效的控制，才能更好地促進信息失真的控制。4.數(shù)據(jù)挖掘技術在不同行業(yè)中的應用4.1市場營銷行業(yè)中數(shù)據(jù)挖掘技術的應用在數(shù)據(jù)挖掘技術方面應用最多的行業(yè)就屬于市場營銷行業(yè)了，這主要是因為數(shù)據(jù)挖掘能有效的解析消費者的消費行為和消費習慣，從而利用其將銷售方式改進和優(yōu)化，最終促進產(chǎn)品銷量的提升。與此同時，通過對購物消費行為的分析，掌握客戶的忠誠度和消費意識等，從而針對性的改變營銷策略，同時還能找到更多潛在的客戶。4.2制造業(yè)中數(shù)據(jù)挖掘技術的應用在制造業(yè)中加強數(shù)據(jù)挖掘技術的應用，其目的就在于對產(chǎn)品質量進行檢驗。具體的做法就是對所制造產(chǎn)品的數(shù)據(jù)進行研究，從而找出其存在的規(guī)則，并對其生產(chǎn)流程進行分析之后，對其生產(chǎn)的過程進行分析，從而更好地對生產(chǎn)質量的影響因素進行分析，并促進其效率的提升，最終提高企業(yè)的經(jīng)濟效益。具體而言，主要就是對各種生產(chǎn)數(shù)據(jù)進行篩選，從而得出有用的數(shù)據(jù)和知識，再采取決策樹算法進行統(tǒng)計決策，并從中選取正確決策，從而更好地對產(chǎn)品在市場中的流行程度，決定企業(yè)生產(chǎn)和轉型的方向。4.3教育行業(yè)中數(shù)據(jù)挖掘技術的應用教育行業(yè)中加強數(shù)據(jù)挖掘技術的應用，主要是為了更好地對學習情況、教學評估和心里動向等數(shù)據(jù)進行分類和篩選，從而為學校的教學改革提供參考和支持。比如為了更好地對教學質量進行評估，就需要對教學質量有關項目進行整合與存儲，從而更好地促進其對教學質量的評估，而這一過程中，就需要采取數(shù)據(jù)挖掘技術對有關教學項目中的數(shù)據(jù)進行挖掘和處理，促進其應用成效的提升3。5.結語綜上所述，在大數(shù)據(jù)背景下，數(shù)據(jù)挖掘技術已經(jīng)在各行各業(yè)中得到了廣泛的應用，所以為了更好地滿足應用的需要，我們必須切實加強對其特點的分析，并