香農(nóng)第一定理:又稱為無(wú)失真信源編碼定理或變長(zhǎng)碼信源編碼定理。將原始信源符號(hào)轉(zhuǎn)化為新的碼符號(hào),使碼符號(hào)盡量服從等概分布,從而每個(gè)碼符號(hào)所攜帶的信息量達(dá)到最大,進(jìn)而可以用盡量少的碼符號(hào)傳輸信源信息。
特征:有噪信道編碼定理。當(dāng)信道的信息傳輸率不超過信道容量時(shí),采用合適的信道編碼方法可以實(shí)現(xiàn)任意高的傳輸可靠性,但若信息傳輸率超過了信道容量,就不可能實(shí)現(xiàn)可靠的傳輸。