蔣瑞祥

（安徽省合肥市新華學院國際教育學院，安徽 合肥 230088）

引言

對于人們來說，信息利用價值非常巨大，直至1940年才逐漸開始將信息以一種科學概念進行研究和分析，隨后才逐漸開始大規(guī)模的運用科學信息。處在當前信息化社會中，信息技術有著極快的發(fā)展及更新速度，面對數量龐大、類型眾多的信息，有效利用信息成為關鍵所在。當前不同領域已經將信息利用放在首要位置，而且伴隨著統(tǒng)計學、概率論的逐步發(fā)展，利用好信息論方法可以極大地推動社會的進步。目前產業(yè)規(guī)模最大的就屬信息產業(yè)，要想不斷促進社會經濟的發(fā)展，就必須要充分發(fā)揮信息論方法在概率論及統(tǒng)計學方面的作用及優(yōu)勢。

一、信息論概念和分類

克勞德·艾爾伍·申農將社會推動到信息化發(fā)展的時代，其構建了信息論，被人們譽為數字時代之父[1]。在20世紀四十年代末期克勞德·申農對聞名于世的《通信的數學原理》進行了發(fā)表，隨著論文的發(fā)表人們開始進入到現(xiàn)代信息論研究的浪潮中。

（一）定義

首先在克勞德·申農看來，信息論的核心問題即為，一端對另一端選取信號的復現(xiàn)，包括近似復現(xiàn)以及精確化的復現(xiàn)；

其次，作為基礎科學理論，信息論探究的是信息本質及其傳遞規(guī)律，屬于新興學科，能夠對存儲信息、計量信息、交換信息、接收信息和傳遞信息等內容進行分析[2]。

（二）分類

基于狹義信息論角度來看，針對通信系統(tǒng)下信息處理、傳遞的科學規(guī)律進行研究時，需要借助統(tǒng)計學方法；

基于廣義信息論的角度來看，對于現(xiàn)實系統(tǒng)下有關信息運用、信息處理識別和信息傳遞的共性科學規(guī)律，應利用數學方法及相關科學方法進行研究。

二、信息論方法在概率上的應用

（一）二分度量法

（二）差異度量法

（三）集中度量法

當前概率論中運用極為廣泛的就是集中度量法，其在一般性描述概率問題的過程中，能夠對概率論的探究進行進一步的延伸，然而信息論研究人員能夠簡便化的進行分析。

基于信息論方法下，最初運用過程中僅將其作為數學工具，然而當前已經發(fā)展為構成信息論方法的系統(tǒng)內容。目前，MaIton以一種更深層次的視角，詳細談久了集中度量法結果，證明了其運用的高效性。

三、信息論在統(tǒng)計中的應用

基于統(tǒng)計學領域，在運用信息論方法的時候，通常都指的是統(tǒng)計下信息量的運用狀況，也包括統(tǒng)計運用下的碼結構、編碼定理等。因為統(tǒng)計學涉及大量的研究內容，而且呈現(xiàn)不斷復雜的趨勢，包括統(tǒng)計混合分布、非線性統(tǒng)計模型等，所以應將基本度量設定成信息量，這樣才能有效解決統(tǒng)計學問題。