周宏印 南京萊斯信息技術(shù)股份有限公司
導(dǎo)言:計算機(jī)數(shù)據(jù)挖掘技術(shù)的出現(xiàn)時間較短,但是應(yīng)用范圍擴(kuò)展特別迅速,這是一項結(jié)合計算機(jī)技術(shù)和統(tǒng)計學(xué),以及最新的云設(shè)施的新技術(shù),所以不能把它簡單歸類在統(tǒng)計技術(shù)或計算機(jī)技術(shù)中。在信息化時代,信息數(shù)量在成幾何數(shù)字增加,但是對于數(shù)據(jù)的檢索卻變得十分困難,原有的搜素引擎只能搜索到小部分?jǐn)?shù)據(jù)。但是想要更多的數(shù)據(jù)就要采用數(shù)據(jù)挖掘的手段。數(shù)據(jù)搜索采用多個方面的搜素,首先對信息對象的文件屬性,特征查找,然后對信息的不同角度進(jìn)行處理。
所謂數(shù)據(jù)挖掘技術(shù),就是幫助人們在眾多信息中查找出所需要信息的一種技術(shù),該技術(shù)在我國出現(xiàn)的時間比較晚,但卻以其特殊的功能得到了快速發(fā)展。該技術(shù)不僅具備計算機(jī)技術(shù)的特性,同時還兼具了統(tǒng)計學(xué)功能。在信息數(shù)量不斷增加的今天,想要從中搜索到需要的信息不是一件簡單的事,計算機(jī)數(shù)據(jù)挖掘技術(shù)成功地為人們解決了這個困擾,受到了越來越多人的歡迎。
所謂有了目標(biāo)才有方向,因此在進(jìn)行數(shù)據(jù)挖掘之前,我們必須先明確目標(biāo),確定數(shù)據(jù)挖掘技術(shù)需要解決的現(xiàn)實問題到底是什么,從而根據(jù)問題和目的意義,尋找適宜的手段,根據(jù)我們需要解決的問題梳理思路和方法,從眾多數(shù)據(jù)挖掘方法中選取最適合的挖掘方法,并確定數(shù)據(jù)挖掘的數(shù)據(jù)庫。接下來根據(jù)問題從數(shù)據(jù)庫中提取適合數(shù)據(jù)挖掘的目標(biāo)數(shù)據(jù),并進(jìn)行初步的數(shù)據(jù)處理,除去無關(guān)信息,方便后面讀取數(shù)據(jù)處理的速度,也在這個預(yù)處理過程中有效的檢驗數(shù)據(jù)是否有誤,通常金融類數(shù)據(jù)需要填補(bǔ)空缺值處理、對數(shù)收益率計算等相關(guān)處理,讓數(shù)據(jù)序列精簡有用,這是數(shù)據(jù)處理當(dāng)中,非常基本和必要的一步,對之后的深入研究和挖掘起決定性作用。在對數(shù)據(jù)進(jìn)行了初步預(yù)處理之后,我們根據(jù)數(shù)據(jù)列進(jìn)行數(shù)據(jù)挖掘。通常在數(shù)據(jù)挖掘算法中需要構(gòu)建數(shù)學(xué)模型,并在計算機(jī)上使用數(shù)學(xué)模型和算法,進(jìn)行編程計算獲得相應(yīng)結(jié)果。得到結(jié)果之后,需要對結(jié)果進(jìn)行檢驗,檢驗其是否能達(dá)到數(shù)據(jù)挖掘的目的,數(shù)據(jù)結(jié)果是否符合相對應(yīng)的現(xiàn)實意義,如果結(jié)果不符合要求將重新選擇數(shù)據(jù)挖掘算法和模型。最后將結(jié)果用于說明實際問題并指導(dǎo)實際工作,從而獲得數(shù)據(jù)挖掘的現(xiàn)實價值。
要想得到有效的信息,就需要從計算機(jī)系統(tǒng)中獲得的信息入手,但是當(dāng)前的網(wǎng)絡(luò)信息中存在不少的隱性信息,這些信息的獲得就要依靠計算機(jī)數(shù)據(jù)挖掘技術(shù)。采用計算機(jī)挖掘技術(shù)可以有效的抓取隱性信息的某些特征,當(dāng)利用散點圖的方式將這些隱性信息表現(xiàn)出來。所以可視化技術(shù)是計算機(jī)數(shù)據(jù)挖掘技術(shù)開發(fā)項目中的一個重點。
網(wǎng)絡(luò)是復(fù)雜的,其中的網(wǎng)絡(luò)信息和數(shù)據(jù)更是十分的龐雜,要想快速、準(zhǔn)確的抓取到自己想要的信息,需要依靠聯(lián)機(jī)分析出不同地域和時段的多維數(shù)據(jù),聯(lián)機(jī)分析處理方式需要依靠用戶的配合。在處理多維數(shù)據(jù)時,需要所有計算機(jī)用戶自行的使用或者篩選出分析算法,利用這些分析算法對數(shù)據(jù)做處理,這樣對探索數(shù)據(jù)也有巨大的推動作用。
計算機(jī)數(shù)據(jù)挖掘技術(shù)的開發(fā)中需要對決策樹進(jìn)行規(guī)則化建立,決策樹是一項重要的開發(fā)項目,因為決策樹的作用是發(fā)揮預(yù)測和分類的功能,對所處理的數(shù)據(jù)信息進(jìn)行具體的預(yù)測和分類。目前開發(fā)的決策樹算法已經(jīng)有很多種,主要有SLIQ、SPRINT、ID3、C4.5等,SLIQ算法具備連續(xù)性屬性,還可以對數(shù)據(jù)做出具體的分類,SPRINT算法與SLIQ算法有同樣的功能屬性,并且這兩種算法可以通過大型訓(xùn)練集對決策時做出歸納。
現(xiàn)代消費者在購物的時候,利用POS機(jī)刷卡結(jié)賬的行為非常普遍,而在這個過程中,關(guān)于這些消費者的一些信息就可以被銷售商所采集,并且消費者越多,銷售商所采集到的有用信息就越多,這些信息對于市場營銷具有非常重要的作用。不同的銷售商或者生產(chǎn)商,可以根據(jù)所采集到的有用信息,分析消費者的各種不同需求、購物習(xí)慣,從而進(jìn)一步分析消費者的消費心理,最終對消費者的下一步消費行為進(jìn)行推斷。例如,企業(yè)可以利用消費者使用信用卡的情況分析商品的銷售情況,也可以通過某些促銷活動,確認(rèn)消費者的消費意向等等。以上種種分析結(jié)果,都離不開計算機(jī)數(shù)據(jù)挖掘技術(shù),由此可見,計算機(jī)數(shù)據(jù)挖掘技術(shù)不僅能夠幫助相關(guān)企業(yè)了解顧客需求,而且還能夠為企業(yè)進(jìn)行重大商業(yè)決策提供準(zhǔn)確數(shù)據(jù)信息,大大增強(qiáng)了企業(yè)的市場競爭力。
投資評估與股票交易市場預(yù)測是金融分析的典型領(lǐng)域,一般以模型預(yù)測法來進(jìn)行分析,包括統(tǒng)計回歸技術(shù)等,因為金融投資是一個風(fēng)險較大的領(lǐng)域,在進(jìn)行投資前一定要進(jìn)行各種數(shù)據(jù)分析,對于各種風(fēng)險進(jìn)行有效規(guī)避,選擇最佳的投資方向。由于事物的發(fā)展都有一定的趨勢,可以進(jìn)行預(yù)測,從投資評估到股票市場預(yù)測,對于數(shù)據(jù)的分析都可以從中推理出一定的發(fā)展情況,對于已有數(shù)據(jù)進(jìn)行處理,根據(jù)數(shù)據(jù)之間的關(guān)系進(jìn)行深入挖掘,根據(jù)一定的模式進(jìn)行合理的預(yù)測。鑒別潛在的欺詐行為,許多商業(yè)銀行經(jīng)常發(fā)生的惡意詐騙行為、惡意透支行為,對于銀行來說都是非常嚴(yán)重的威脅,預(yù)測這些詐騙行為將有助于降低銀行的風(fēng)險,一般采用對比分析正常行為與詐騙行為的方式來鑒別,分析詐騙行為的獨特性,對比正常行為與詐騙行為,一旦出現(xiàn)需要警惕的現(xiàn)象時提醒決策人員,目前許多公司都研發(fā)了這一類的軟件,針對商業(yè)銀行的欺詐進(jìn)行評估,對于有風(fēng)險的交易行為予以探究。對與日漸猖獗的洗錢活動等犯罪,數(shù)據(jù)挖掘技術(shù)都可以極大的提高其預(yù)防效果。
金融企業(yè)是具有一定風(fēng)險的企業(yè),其重要的就是要對投資的風(fēng)險做出評估,這樣,才能在我們金融企業(yè)進(jìn)行投資時把風(fēng)險降到最低。這時,金融企業(yè)就利用計算機(jī)數(shù)據(jù)挖掘技術(shù)對我們的投資項目進(jìn)行評估預(yù)測。如:在企業(yè)收購股票時,就要根據(jù)這只股票歷史走向的數(shù)據(jù)做,從而做出評估,在做出較為精準(zhǔn)的判斷和選擇。在金融業(yè)涉及到借貸款的問題時,企業(yè)要根據(jù)貸款對象日常的誠信做出調(diào)查,然后再進(jìn)行數(shù)據(jù)的挖掘統(tǒng)計,從而判斷出貸款對象是屬于低風(fēng)險還是高風(fēng)險。由此可見,計算機(jī)數(shù)據(jù)挖掘技術(shù)對金融企業(yè)的投資、貸款有著重要的作用。
結(jié)語:數(shù)據(jù)挖掘是一個重要的工具與方法,雖然不是萬能的,但是對于一些潛在的客戶、風(fēng)險都可以加以挖掘,即使其不能告知為什么形成這些潛在的利益或風(fēng)險,但是卻可以使得這些潛在的用戶變?yōu)楝F(xiàn)實。數(shù)據(jù)挖掘技術(shù)在諸多領(lǐng)域都得到了廣泛的應(yīng)用,隨著數(shù)據(jù)庫以及計算機(jī)技術(shù)的迅猛發(fā)展,對于許多過去較為棘手的問題現(xiàn)在通過數(shù)據(jù)挖掘技術(shù)都可以得到良好的解決。