資訊理論的研究方法

Ⅰ 試述資訊理論的研究內容

網路知道上有相同的問題,我圖簡便直接復制過來了. 資訊理論的創始人是美貝爾電話研究所的數學家香農. 資訊理論的創始人是美貝爾電話研究所的數學家香農（C.E.Shannon1916——）,他為解決通訊技術中的信息編碼問題,突破老框框,把發射信息和接收信息作為一個整體的通訊過程來研究,提出通訊系統的一般模型；同時建立了信息量的統計公式,奠定了資訊理論的理論基礎.1948年申農發表的《通訊的數學理論》一文,成為資訊理論誕生的標志. 申農創立資訊理論,是在前人研究的基礎上完成的.1922年卡松提出邊帶理論,指明信號在調制（編碼）與傳送過程中與頻譜寬度的關系.1922年哈特萊發表《信息傳輸》的文章,首先提出消息是代碼、符號而不是信息內容本身,使信息與消息區分開來,並提出用消息可能數目的對數來度量消息中所含有的信息量,為資訊理論的創立提供了思路.美國統計學家費希爾從古典統計理論角度研究了信息理論,蘇聯數學家哥爾莫戈洛夫也對資訊理論作過研究.控制論創始人維納建立了維納濾波理論和信號預測理論,也提出了信息量的統計數學公式,甚至有人認為維納也是資訊理論創始人之一. 在資訊理論的發展中,還有許多科學家對它做出了卓越的貢獻.法國物理學家L.布里淵（L.Brillouin）1956年發表《科學與資訊理論》專著,從熱力學和生命等許多方面探討資訊理論,把熱力學熵與信息熵直接聯系起來,使熱力學中爭論了一個世紀之久的「麥克斯韋爾妖」的佯謬問題得到了滿意的解釋.英國神經生理學家（W.B.Ashby）1964年發表的《系統與信息》等文章,還把資訊理論推廣應用於生物學和神經生理學領域,也成為資訊理論的重要著作.這些科學家們的研究,以及後來從經濟、管理和社會的各個部門對資訊理論的研究,使資訊理論遠遠地超越了通訊的范圍.因此,資訊理論可以分成兩種：狹義資訊理論與廣義資訊理論. 狹義資訊理論是關於通訊技術的理論,它是以數學方法研究通訊技術中關於信息的傳輸和變換規律的一門科學.廣義資訊理論,則超出了通訊技術的范圍來研究信息問題,它以各種系統、各門科學中的信息為對象,廣泛地研究信息的本質和特點,以及信息的取得、計量、傳輸、儲存、處理、控制和利用的一般規律.顯然,廣義資訊理論包括了狹義資訊理論的內容,但其研究范圍卻比通訊領域廣泛得多,是狹義資訊理論在各個領域的應用和推廣,因此,它的規律也更一般化,適用於各個領域,所以它是一門橫斷學科.廣義資訊理論,人們也稱它為信息科學.關於信息的本質和特點,是資訊理論研究的首要內容和解決其它問題的前提.信息是什麼?迄今為止還沒有一個公認的定義. 英文信息一詞（Information）的含義是情報、資料、消息、報導、知識的意思.所以長期以來人們就把信息看作是消息的同義語,簡單地把信息定義為能夠帶來新內容、新知識的消息.但是後來發現信息的含義要比消息、情報的含義廣泛得多,不僅消息、情報是信息,指令、代碼、符號語言、文字等,一切含有內容的信號都是信息.哈特萊第一次把消息、情報、信號、語言等等都是信息的載體,而信息則是它們荷載著的內容.但是信息到底是什麼呢?申農的狹義資訊理論第一個給予信息以科學定義：信息是人們對事物了解的不確定性的消除或減少.這是從通訊角度上下的定義,即信源發出了某種情況的不了解的狀態,即消除了不定性.並且用概率統計數學方法,來度量為定性被消除的量的大小：H（x）為信息熵,是信源整體的平均不定度.而信息I（p）是從信宿角度代表收到信息後消除不定性的程度,也就是獲得新知識的量,所以它只不在信源發出的信息熵被信宿收到後才有意義.在排除干擾的理想情況下,信源發出的信號與信宿接收的信號一一對應,H（x）與I（p）二者相等.所以信息熵的公式也就是信息量的分式.式中的k是一個選擇單位的常數,當對數以2為底時,單位稱比特（bit）,信息熵是l0g2=1比特. 在申農尋信息量定名稱時,數學家馮.諾依曼建議稱為熵,理由是不定性函數在統計力學中已經用在熵下面了.在熱力學中熵是物質系統狀態的一個函數,它表示微觀粒子之間無規則的排列程度,即表示系統的紊亂度,維納說：「信息量的概念非常自然地從屬於統計學的一個古典概念——熵.正如一個系統中的信息量是它的組織化程度的度量,一個系統的熵就是它的無組織程度的度量；這一個正好是那一個的負數.」這說明信息與熵是一個相反的量,信息是負熵,所以在信息熵的公式中有負號,它表示系統獲得後無序狀態的減少或消除,即消除不定性的大小. 信息一般具有如下一些特徵：1可識別；2可轉換；3可傳遞；4可加工處理；5可多次利用（無損耗性）；6在流通中擴充；7主客體二重性.信息是物質相互作用的一種屬性,涉及主客體雙方；信息表徵信源客體存在方式和運動狀態的特性,所以它具有客體性,絕對性；但接收者所獲得的信息量和價值的大小,與信宿主體的背景有關表現了信息的主體性和相對性.8信息的能動性.信息的產生、存在和流通,依賴於物質和能量,沒有物質和能量就沒有能動作用.信息可以控制和支配物質與能量的流動. 資訊理論還研究信道的容量、消息的編碼與調制的問題以及雜訊與濾波的理論等方面的內容.資訊理論還研究語義信息、有效信息和模糊信息等方面的問題.廣義資訊理論則把信息定義為物質在相互作用中表徵外部情況的一種普遍屬性,它是一種物質系統的特性以一定形式在另一種物質系統中的再現.信息概念具有普遍意義,它已經廣泛地滲透到各個領域,信息科學是具有方法論性質的一門科學.信息方法具有普適性. 所謂信息方法就是運用信息觀點,把事物看做是一個信息流動的系統,通過對信息流程的分析和處理,達到對事物復雜運動規律認識的一種科學方法.它的特點是撇開對象的具體運動形態,把它作為一個信息流通過程加以分析.信息方法著眼於信息,揭露了事物之間普遍存在的信息聯系,對過去難於理解的現象從信息觀點作出了科學的說明.資訊理論為控制論、自動化技術和現代化通訊技術奠定了理論基礎,為研究大腦結構、遺傳密碼、生命系統和神經病理象開辟了新的途徑,為管理的科學化和決策的科學批提供了思想武器.信息方法為認識當代以電子計算機和現代通訊技術為中心的新技術革命的浪潮,為認識論的研究和發展,將進一步提高人類認識與改造自然界的能力.

Ⅱ 一般的資訊理論研究的主要內容有哪些

資訊理論是研究信息的產生、獲取、變換、傳輸、存貯、處理識別及利用的學科.資訊理論還研究信道的容量、消息的編碼與調制的問題以及雜訊與濾波的理論等方面的內容.資訊理論還研究語義信息、有效信息和模糊信息等方面的問題.資訊理論有狹義和廣義之分.狹義資訊理論即申農早期的研究成果,它以編碼理論為中心,主要研究信息系統模型、信息的度量、信息容量、編碼理論及雜訊理論等.廣義資訊理論又稱信息科學,主要研究以計算機處理為中心的信息處理的基本理論,包括評議、文字的處理、圖像識別、學習理論及其各種應用.廣義資訊理論則把信息定義為物質在相互作用中表徵外部情況的一種普遍屬性,它是一種物質系統的特性以一定形式在另一種物質系統中的再現.廣義資訊理論包括了狹義資訊理論的內容,但其研究范圍卻比通訊領域廣泛得多,是狹義
資訊理論在各個領域的應用和推廣,因此,它的規律也更一般化,適用於各個領域,所以它是一門橫斷學科.廣義資訊理論,人們也稱它為信息科學.
信息和控制是信息科學的基礎和核心.70年代以來,電視、數據通信、遙感和生物醫學工程的發展,向信息科學提出大量的研究課題,如信息的壓縮、增強、恢復等圖像處理和傳輸技術,信息特徵的抽取、分類和識別的模式、識別理論和方法,出現了實用的圖像處理和模式識別系統.

Ⅲ 關於資訊理論，你知道它涉及到哪些領域嗎

1.信息的定義：資訊理論的鼻祖申農給信息下的界定是：不確定性的排除其實，信息的定義下不來200種

2.資訊理論：資訊理論是研究信息的本質，並用數學原理研究信息的計量傳送轉換和存儲的一門科學

資訊理論在各行各業的應用和營銷推廣，因而，它的規律性也更一般化，適用於各行各業，因此它是一門橫斷學科。廣義資訊理論，大家也稱它為信息科學。

信息和操縱是信息科學的基本和關鍵。70時代以來，電視機、數據通訊、遙感和生物醫學工程項目的發展，向信息科學明確提出大量的研究課題研究，如信息的縮小、提高、修復等圖像處理和無線通信技術，信息特點的提取、歸類和鑒別的模式、鑒別基礎理論和方式，出現了實用的圖像處理和計算機視覺系統軟體。

Ⅳ 論文常用的研究方法有哪些

01
【調查法】
調查法是科學研究中最常用的一種方法，通常指通過書面或口頭回答問題的方式，了解被試的心理活動的方法。它是有計劃、有目的並且系統地搜集有關研究對象歷史狀況或現實狀況材料的方法，調查方法是科學研究中常用的基本研究方法，它綜合運用了觀察法、歷史法等方法以及談話、問卷、個案研究、測驗等科學方式，對教育現象進行有計劃的、周密的和系統的了解，並且對調查搜集到的資料進行分析、綜合、比較、歸納，從而為人們提供規律性的知識。調查法可以分為書面調查和口頭調查兩種。

02
【觀察法】
觀察法是指研究者根據一定的研究目的、研究提綱或觀察表，用自己的感官和輔助工具去觀察被研究對象，從而獲得資料的一種方法。科學的觀察具有目的性和計劃性、系統性和可重復性，在科學實驗和調查研究中，觀察法具有擴大人們的感性認識、啟發人們的思維、導致新的發現這幾個方面的作用。常見的觀察方法有：核對清單法；級別量表法；記敘性描述。觀察一般利用眼睛、耳朵等感覺器官去感知觀察對象。

03
【實驗法】
實驗法是研究者有意改變或設計的社會過程中了解研究對象的外顯行為。實驗法的依據是自然和社會中現象和現象之間相當普遍存在著的一種相關關系——因果關系。其主要特點是：主動變革性、控制性、因果性。實驗法有實驗室實驗法與自然實驗法兩種，實驗室實驗法便於嚴格控制各種因素，並通過專門儀器進行測試和記錄實驗數據，一般具有較高的可信度。自然實驗法比較接近人的生活實際，易於實施。

04
【文獻研究法】
文獻研究法是根據一定的研究目的或課題，通過調查文獻來獲得資料，從而全面地、正確地了解掌握所要研究問題的一種方法。文獻研究法被子廣泛用於各種學科研究中，既能了解有關問題的歷史和現狀，幫助確定研究課題，又能形成關於研究對象的一般印象，有助於觀察和訪問，還能得到現實資料的比較資料，並且有助於了解事物的全貌。文獻法是一種古老、而又富有生命力的科學研究方法。

05
【實證研究法】
實證研究法是認識客觀現象，向人們提供實在、有用、確定、精確的知識研究方法，其重點是研究現象本身「是什麼」的問題。實證研究法試圖超越或排斥價值判斷，只揭示客觀現象的內在構成因素及因素的普遍聯系，歸納概括現象的本質及其運行規律。

06
【定量分析法】
定量分析法是對社會現象的數量特徵、數量關系與數量變化進行分析的方法。在企業管理上，定量分析法是以企業財務報表為主要數據來源，按照某種數理方式進行加工整理，得出企業信用結果。定量分析是投資分析師使用數學模塊對公司可量化數據進行的分析，通過分析對公司經營給予評價並做出投資判斷。定量分析的對象主要為財務報表，如資金平衡表、損益表、留存收益表等。其功能在於揭示和描述社會現象的相互作用和發展趨勢。

07
【定性分析法】
定性分析法亦稱非數量分析法，主要依靠預測人員的豐富實踐經驗以及主觀的判斷和分析能力，推斷出事物的性質和發展趨勢的分析方法，屬於預測分析的一種基本方法。定性分析法主要是解決研究對象「有沒有」、「是不是」的問題。定性分析常在定量分析之前進行，它為設計或選擇定量方法提供有用的信息；但並非所有的定量分析都必須事先進行定性分析，因為有時分析對象中含有哪些組分是已知的。這類方法主要適用於一些沒有或不具備完整的歷史資料和數據的事項。

08
【跨學科研究法】
運用多學科的理論、方法和成果從整體上對某一課題進行綜合研究的方法，也稱「交叉研究法」。科學發展運動的規律表明，科學在高度分化中又高度綜合，形成一個統一的整體。據有關專家統計，現在世界上有2000多種學科，而學科分化的趨勢還在加劇，但同時各學科間的聯系愈來愈緊密，在語言、方法和某些概念方面，有日益統一化的趨勢。

09
【功能分析法】
功能分析法是社會科學用來分析社會現象的一種方法，是社會調查常用的分析方法之一。它通過說明社會現象怎樣滿足一個社會系統的需要（即具有怎樣的功能）來解釋社會現象。

10
【模擬法（模型方法）】
模擬法和類比法很近似。它是在實驗室里先設計出於某被研究現象或過程（即原型）相似的模型，然後通過模型，間接的研究原型規律性的實驗方法。先依照原型的主要特徵，創設一個相似的模型，然後通過模型來間接研究原型的一種形容方法。根據模型和原型之間的相似關系，模擬法可分為物理模擬和數學模擬兩種。

Ⅳ 什麼是資訊理論

資訊理論是將信息的傳遞作為一種統計現象來考慮，給出了估算通信信道容量的方法。信息傳輸和信息壓縮是資訊理論研究中的兩大領域。這兩個方面又由信息傳輸定理、信源－信道隔離定理相互聯系。

實踐證明，世界上一切事物都在運動變化之中，在這種運動和變化之過程中，就會發出各種各樣的信息，內部的變化可以反映到外部，外部的表現反映內在的實質。

整體的變化可以反映於局部，局部的變化影響整體。人類在世界上生存，就必須認識信息、利用信息，否則就無法生存，例如預防和躲避自然災害、發明創造工具、發展生產、科學試驗等等，都是受某些信息的啟示。

戰爭更離不開信息，例如我國周代已利用烽火台傳遞戰爭的信息。

凡此種種，一言以蔽之，從有人類的那一天開始，人類就生活在信息的海洋里，一時一刻也離不開信息，而關鍵的問題就是如何認識信息，利用信息，以改變自己的生存條件、創造更好的生活環境。

(5)資訊理論的研究方法擴展閱讀

人類需要信息，而且還要傳遞信息，語言的作用就是傳遞信息，也是最好的信息傳遞方法，但是語言因受距離的限制，超出聲音的可達范圍即失去傳遞的作用，又易受外界噪音的干擾，於是人類又發明了文字，文字也是傳遞信息的一種方式，但亦有一定的局限性，因而人類叉不斷地創造許許多多的信息傳遞方法。

傳遞信息的目的是為了做出合理的決策，盡管人類對信息的認識、利用源遠流長，即信息反饋。但真正對信息理論的研究，僅僅只有半個多世紀的歷程，其突破點首先是從信息傳遞方法開始的。

1922年卡橙闡明了邊帶問題理論，提出信號保護法則，即信號在調制（編碼）過程中頻譜展寬法制。可以說是資訊理論的先導。

當信源和信宿已給定、信道也已選定後，決定信息系統性能就在於編碼器和解碼器。設計一個信息系統時，除了選擇信道和設計其附屬設施外，主要工作也就是設計編解碼器。一般情況下，信息系統的主要性能指標是它的有效性和可靠性。

有效性就是在系統中傳送盡可能多的信息；而可靠性是要求信宿收到的信息盡可能地與信源發出的信息一致，或者說失真盡可能小。

最佳編解碼器就是要使系統最有效和最可靠。但是，可靠性和有效性往往是相互矛盾的。越有效常導致不可靠，反之也是如此。

Ⅵ 信息管理的研究方法有哪些

研究方法
第一節 觀察研究方法
第二節 調查研究方法
第三節 實驗研究方法
第五章 理性思維方法
第一節 科學抽象方法
第二節 歷史方法和邏輯方法
第三節 比較和分類方法
第四節 歸納和演繹方法
第五節 分析和綜合方法
第六章 橫向科學方法
第一節 橫向科學方法概述
第二節 系統科學方法
第三節 控制論方法
第四節 資訊理論方法
第五節 數學方法
第七章 信息管理學專門方法
第一節 文獻信息處理方法
第二節 文獻計量學方法
第三節 引文分析方法

Ⅶ 資訊理論講述的是什麼問題

資訊理論是由美國數學家香農創立的，它是用概率論和數理統計方法，從量的方面來研究系統的信息如何獲取、加工、處理、傳輸和控制的一門科學。信息就是指消息中所包含的新內容與新知識，是用來減少和消除人們對於事物認識的不確定性。信息是一切系統保持一定結構、實現其功能的基礎。狹義資訊理論是研究在通訊系統中普遍存在著的信息傳遞的共同規律、以及如何提高各信息傳輸系統的有效性和可靠性的一門通訊理論。廣義資訊理論被理解為使運用狹義資訊理論的觀點來研究一切問題的理論。資訊理論認為，系統正是通過獲取、傳遞、加工與處理信息而實現其有目的的運動的。資訊理論能夠揭示人類認識活動產生飛躍的實質，有助於探索與研究人們的思維規律和推動與進化人們的思維活動。

Ⅷ 畢業論文中研究方法，手段和步驟怎樣寫

（1）文獻研究法：根據所要研究內容 ，通過查閱相關文獻獲得充足的資料，從而全面地了解所研究課題的背景、歷史、現狀以及前景。

（2）研究項目分析法：在進行理論的搜集與分析之後，根據現有的研究項目整體系統進行分析與設計，實現理論與實踐的相結合，使理論有理有據，設計更合理。

根據許多論文的選題經驗，這一級論文的選題可從以下幾方面考慮：本專業的研究空白、發生爭議的話題(自己的觀點感到較為充分)、對比性的話題、從其他專業角度研究本專業的話題(這是一種選題的邊際效應)、有新的插入角度的老話題、剛剛冒出來的本專業的新問題。

(8)資訊理論的研究方法擴展閱讀：

畢業論文的基本教學要求是：

1、培養學生綜合運用、鞏固與擴展所學的基礎理論和專業知識，培養學生獨立分析、解決實際問題能力、培養學生處理數據和信息的能力。

2、培養學生正確的理論聯系實際的工作作風，嚴肅認真的科學態度。

3、培養學生進行社會調查研究；文獻資料收集、閱讀和整理、使用；提出論點、綜合論證、總結寫作等基本技能。

Ⅸ 資訊理論的主要有哪些內容

1.信息的定義:資訊理論的鼻祖申農給信息下的定義是:不確定性的排除其實，信息的定義不下200種

2.資訊理論:資訊理論是研究信息的本質，並用數學方法研究信息的計量傳遞變換和存儲的一門科學

3.信息的系統性:指信息不是零星的個別的混亂的，而是有一組具有特定內容和性質的信息，在一定條件下為某種目的而形成的有機體，如患者的全部症狀智能診斷卡使用中，應該拿著診斷卡從第一項症狀直到最後一項症狀，一項一項地問診，從頭至尾地建立一個症狀的信息系統

4.信息處理:就是數據處理數據處理包括信息的收集加工存儲檢索傳輸和顯示整個用智能診斷卡診病過程——取卡問診打點統計找大逆診輔檢，就是信息處理過程

5.信息價值衡量:信息的價值因人而異，同一信息，對不同的人，不同的地點，價值不同，在智能診斷卡中的分值也不同