大數(shù)據(jù)崛起與數(shù)據(jù)挖掘分析
時間:2022-08-14 08:46:02
導(dǎo)語:大數(shù)據(jù)崛起與數(shù)據(jù)挖掘分析一文來源于網(wǎng)友上傳,不代表本站觀點,若需要原創(chuàng)文章可咨詢客服老師,歡迎參考。
在人類生活和社會生產(chǎn)的各個行業(yè)中都需要運用到大數(shù)據(jù),極大提高了人們的生活質(zhì)量和社會生產(chǎn)的效率[1]。但是當(dāng)今社會是技術(shù)更新日新月異的時代,為了促使大數(shù)據(jù)更好為人類提供服務(wù)以及促進其自身的不斷崛起,需要挖掘更加豐富、有效且多元化的數(shù)據(jù)信息內(nèi)容,才能滿足社會發(fā)展的需求,也能有效鞏固大數(shù)據(jù)在社會發(fā)展中的重要地位。
1相關(guān)概述
1.1大數(shù)據(jù)
大數(shù)據(jù)又被稱為巨量數(shù)據(jù),其是在物聯(lián)網(wǎng)、云制造技術(shù)影響下產(chǎn)生的一種新型的信息處理模式,通過分析信息資產(chǎn)的變化規(guī)律,從而使信息處理具有更高的流程優(yōu)化能力和決策洞察能力。
1.2大數(shù)據(jù)崛起
大數(shù)據(jù)風(fēng)暴已影響到全世界的各個角落,在社會中的各個領(lǐng)域都需要通過數(shù)據(jù)分析各行業(yè)的運營情況,并根據(jù)數(shù)據(jù)分析結(jié)果作好相應(yīng)的決策與判斷,因此,大數(shù)據(jù)已在社會中得到廣泛使用并快速崛起。企業(yè)通過將所有的業(yè)務(wù)數(shù)據(jù)信息進行整合分析,形成高速、真實及多樣的管理模式,將能有效降低企業(yè)業(yè)務(wù)操作的資源損耗,同時還能有效提升企業(yè)工作的質(zhì)量和效率[2]。
數(shù)據(jù)挖掘技術(shù)是一種新興的科學(xué)技術(shù),是由網(wǎng)絡(luò)技術(shù)發(fā)展而來的,其不僅能用來分析具有特定規(guī)律的事物,同時對于數(shù)據(jù)量較大且復(fù)雜的數(shù)據(jù)信息其也能發(fā)掘其中的聯(lián)系,并利用有效的技術(shù)手段,將復(fù)雜的數(shù)據(jù)信息從數(shù)據(jù)庫中抽離出來,采用自身的編輯、處理及合成功能集合數(shù)據(jù)信息,供人們分析和使用[3]。
1.3.1基本特點
數(shù)據(jù)挖掘也可以被理解為數(shù)據(jù)分析,它的主要特點是能夠?qū)?shù)據(jù)庫中的各項數(shù)據(jù)進行分析、抽取、模型處理以及轉(zhuǎn)換等,提取其中的關(guān)鍵性數(shù)據(jù)輔助人們進行企業(yè)生產(chǎn)決策,并能取得良好的效果。相較于傳統(tǒng)的數(shù)據(jù)分析,其是在數(shù)據(jù)未知的情況下進行信息挖掘,因此,數(shù)據(jù)挖掘的三大基本特征是未知、實用性強、有效。在進行數(shù)據(jù)挖掘過程中可采用分類、聚類、決策樹、關(guān)聯(lián)規(guī)則等多種不同的分析方式進行數(shù)據(jù)信息發(fā)掘。
1.3.2基本步驟
數(shù)據(jù)挖掘一般分為數(shù)據(jù)準備、數(shù)據(jù)挖掘、運用管理、計算知識提取數(shù)據(jù)信息三個步驟。(1)數(shù)據(jù)準備,也就是要明確數(shù)據(jù)目標,在數(shù)據(jù)庫中檢索出符合條件且能被運用的數(shù)據(jù),并做好分類、編輯等準備工作。(2)數(shù)據(jù)挖掘,根據(jù)數(shù)據(jù)挖掘的要求和目標,選擇科學(xué)、合理的分析和計算方法,找出數(shù)據(jù)信息的特征和數(shù)據(jù)之間的聯(lián)系,并歸納數(shù)據(jù)的應(yīng)用價值表現(xiàn)[4]。(3)運用管理、計算知識提取數(shù)據(jù)信息,對于數(shù)據(jù)信息的總結(jié)還需進行實踐與評估,也就是將得出的數(shù)據(jù)結(jié)論運用到實踐工作中,通過實踐結(jié)果判定其數(shù)據(jù)發(fā)掘分析過程的正確與否。
2數(shù)據(jù)挖掘的應(yīng)用
數(shù)據(jù)挖掘被應(yīng)用到市場營銷、工業(yè)制造、科學(xué)研究、教育領(lǐng)域、醫(yī)學(xué)領(lǐng)域、通訊行業(yè)以及網(wǎng)絡(luò)技術(shù)應(yīng)用等多個領(lǐng)域,對行業(yè)發(fā)展具有重要影響。(1)市場營銷是最早開始使用數(shù)據(jù)挖掘技術(shù)的領(lǐng)域,也是目前應(yīng)用大數(shù)據(jù)最多的領(lǐng)域,市場營銷工作要取得良好的營銷效果就必須充分發(fā)掘用戶的消費習(xí)慣和分析其消費特點,而這些結(jié)論都需要通過對其消費的數(shù)據(jù)信息進行深入的分析,了解其中的規(guī)律,以此來判定用戶的消費需求和消費能力,從而改進或轉(zhuǎn)變企業(yè)的營銷思路,提高企業(yè)營銷業(yè)績。通過數(shù)據(jù)分析的延伸,在市場營銷方面已不僅僅包含傳統(tǒng)的實體物品營銷,對于銀行、保險、電子商務(wù)以及金融領(lǐng)域,也可通過數(shù)據(jù)挖掘和分析市場經(jīng)濟的走勢,為自身行業(yè)客戶帶來經(jīng)濟利益的同時,也有效促進了自身行業(yè)的發(fā)展[5]。(2)工業(yè)制造,通過分析工業(yè)制造行業(yè)的各種零部件生產(chǎn)數(shù)據(jù)以及分析產(chǎn)品缺陷,能夠快速找出影響產(chǎn)品生產(chǎn)率的相關(guān)因素,在后續(xù)的工作中則會盡力減少和避免因素影響對產(chǎn)品造成的損壞,從而有利于提高工業(yè)產(chǎn)品的生產(chǎn)效率和良品率,將能有效促進企業(yè)的快速發(fā)展。(3)科學(xué)研究,科學(xué)研究一般都需要進行大量的數(shù)據(jù)觀測和實驗論證,才能獲得有效的科學(xué)結(jié)論和找出某種事物的科學(xué)發(fā)展規(guī)律,而數(shù)據(jù)觀測和實驗論證都離不開數(shù)據(jù)的支持,利用數(shù)據(jù)挖掘技術(shù)能夠快速找出科學(xué)數(shù)據(jù)之間的聯(lián)系、變化規(guī)律以及科學(xué)家肉眼無法識別的科學(xué)知識,通過對相關(guān)數(shù)據(jù)信息進行科學(xué)的分析和計算,能有效降低科學(xué)研究的難度,使科學(xué)研究變得更加直觀和簡便。對于DNA數(shù)據(jù)、外空星體數(shù)據(jù)的探索,采用大數(shù)據(jù)分析相較于傳統(tǒng)數(shù)據(jù)分析容易得多。(4)教育領(lǐng)域,其涉及教學(xué)資源的最優(yōu)化配置、教學(xué)管理方式、學(xué)生心理發(fā)展狀態(tài)、學(xué)習(xí)情況、教學(xué)評價以及綜合素質(zhì)發(fā)展等多項教學(xué)工作內(nèi)容,為了使各項工作都能和諧、穩(wěn)定、健康進行,需采用數(shù)據(jù)挖掘技術(shù)來實現(xiàn)教學(xué)管理者統(tǒng)籌和規(guī)劃各項工作。(5)醫(yī)學(xué)領(lǐng)域,醫(yī)學(xué)數(shù)據(jù)和決策的正確與否與人類的生命安全息息相關(guān),為了保證醫(yī)療決策數(shù)據(jù)的準確性和高效性,可采用數(shù)據(jù)挖掘技術(shù)對醫(yī)療信息數(shù)據(jù)進行有效的分析,為醫(yī)療決策提供安全保障[6]。(6)網(wǎng)絡(luò)技術(shù)應(yīng)用,數(shù)據(jù)挖掘技術(shù)是由網(wǎng)絡(luò)技術(shù)發(fā)展而來的,因此,其與網(wǎng)絡(luò)技術(shù)是相輔相成的關(guān)系,一方面網(wǎng)絡(luò)技術(shù)的快速發(fā)展能有效促進數(shù)據(jù)挖掘技術(shù)的提高,另一方面數(shù)據(jù)挖掘技術(shù)可提高網(wǎng)絡(luò)技術(shù)的發(fā)展速度,通過數(shù)據(jù)挖掘能有效提高電子商務(wù)、搜索引擎等相關(guān)網(wǎng)絡(luò)技術(shù)的使用效率,例如得到用戶需搜索的信息便可通過數(shù)據(jù)挖掘技術(shù)中的預(yù)測分類算法來實現(xiàn)。(7)通訊行業(yè),通訊行業(yè)與網(wǎng)絡(luò)技術(shù)和數(shù)據(jù)挖掘技術(shù)的發(fā)展都有著必然的聯(lián)系,其不僅包含了市場營銷,還包含了通訊技術(shù)和服務(wù),而這些資源要進行有效和無縫連接需將行業(yè)內(nèi)大量的復(fù)雜數(shù)據(jù)進行集合,找出各項數(shù)據(jù)信息的發(fā)展規(guī)律,然后作出正確的決策。例如,對于用戶通信行為、系統(tǒng)負載、企業(yè)利潤率、數(shù)據(jù)通信容量和速率等數(shù)據(jù)信息,需采用聚類方法和孤立點分析的方式,找出行業(yè)內(nèi)的異常狀態(tài)和影響行業(yè)發(fā)展的因素,從而能夠及時采取有效的措施解決制約問題,促進通訊行業(yè)快速發(fā)展。
3大數(shù)據(jù)崛起與數(shù)據(jù)挖掘的關(guān)系
3.1大數(shù)據(jù)的崛起離不開數(shù)據(jù)挖掘的支持在人們的生活和工作中都需要應(yīng)用到數(shù)據(jù),數(shù)據(jù)的變化代表著人們行為的改變以及社會生產(chǎn)力的變化,而人類進行生產(chǎn)最主要的目的在于促進社會經(jīng)濟的不斷發(fā)展,因此,需要對各項生產(chǎn)信息數(shù)據(jù)進行深入和有效的挖掘和分析,找出事物之間的聯(lián)系和生產(chǎn)變化的規(guī)律,目的在于根據(jù)現(xiàn)有的規(guī)律,預(yù)測其未來的發(fā)展方向,因此,數(shù)據(jù)挖掘技術(shù)越來越重要。而數(shù)據(jù)挖掘技術(shù)的重要性使人們對大數(shù)據(jù)的作用有了更加全面和深刻的了解,因此,要不斷提升自身的數(shù)據(jù)挖掘能力,從而促進大數(shù)據(jù)技術(shù)不斷崛起[7]。3.2大數(shù)據(jù)崛起有助于提高數(shù)據(jù)挖掘的工作效率任何一個實力雄厚的企業(yè),其自身的技術(shù)能力一般不會太差,大數(shù)據(jù)崛起就說明了大數(shù)據(jù)挖掘技術(shù)已變得相當(dāng)規(guī)范,從大數(shù)據(jù)技術(shù)被廣泛運用到各行各業(yè)中可以看出。并且大數(shù)據(jù)的崛起,使得大數(shù)據(jù)分析的各方面技能都相對成熟,其能使數(shù)據(jù)發(fā)掘工作變得更加實用和高效,從而更好為人們提供優(yōu)質(zhì)的數(shù)據(jù)信息服務(wù)。
4結(jié)語
當(dāng)今社會是知識、數(shù)據(jù)爆炸的時代,大數(shù)據(jù)知識和技術(shù)的快速發(fā)展改變了人們原有的生活和工作方式。其被廣泛應(yīng)用于市場營銷、工業(yè)制造、科學(xué)研究、教育領(lǐng)域、醫(yī)學(xué)領(lǐng)域、通訊行業(yè)以及網(wǎng)絡(luò)技術(shù)應(yīng)用等多個領(lǐng)域,有效推動了社會經(jīng)濟的快速發(fā)展。而大數(shù)據(jù)的崛起與數(shù)據(jù)挖掘技術(shù)又有著密切的聯(lián)系,數(shù)據(jù)挖掘技術(shù)的快速發(fā)展使得大數(shù)據(jù)能夠為人們提供實用和高效的數(shù)據(jù)信息服務(wù),從而使人們在生活和工作中,能夠利用數(shù)據(jù)變化的規(guī)律或事物數(shù)據(jù)之間的聯(lián)系,研究出其未來的發(fā)展趨勢,從而作出正確的決策,因此數(shù)據(jù)挖掘技術(shù)能有效提高人們的生產(chǎn)、制造水平和效率,并且能為人類企業(yè)生產(chǎn)的決策提供科學(xué)、合理的數(shù)據(jù)依據(jù),使得人類的各項活動能夠安全、快速開展[8]。
作者:徐軍 單位:太湖流域管理局水文局
參考文獻
[1]盧建昌,樊圍國.大數(shù)據(jù)時代下數(shù)據(jù)挖掘技術(shù)在電力企業(yè)中的應(yīng)用[J].廣東電力,2014(9):88-94.
[2]馬遙.計算機數(shù)據(jù)挖掘技術(shù)在CBA聯(lián)賽中的應(yīng)用理論研究[D].鄭州:鄭州大學(xué),2014.
[3]曹莉.芻議大數(shù)據(jù)時代的數(shù)據(jù)挖掘與精細管理[J].經(jīng)營管理者,2013(18):191-192.
[4]李平榮.大數(shù)據(jù)時代的數(shù)據(jù)挖掘技術(shù)與應(yīng)用[J].重慶三峽學(xué)院學(xué)報,2014(3):145-147.
[5]韓英.淺析大數(shù)據(jù)時代的數(shù)據(jù)挖掘與精細管理[J].成都航空職業(yè)技術(shù)學(xué)院學(xué)報,2013,29(4):63-71.
[6]丁巖,楊慶平,錢煜明,等.基于云計算的數(shù)據(jù)挖掘平臺架構(gòu)及其關(guān)鍵技術(shù)研究[J].中興通訊技術(shù),2013,19(1):53-56,60.
[7]趙倩倩,程國建,冀乾宇,等.大數(shù)據(jù)崛起與數(shù)據(jù)挖掘芻議[J].電腦知識與技術(shù),2014(33):7831-7833.
[8]王元卓,靳小龍,程學(xué)旗,等.網(wǎng)絡(luò)大數(shù)據(jù):現(xiàn)狀與展望[J].計算機學(xué)報,2013,36(6):1125-1138.