1.熵編碼
「熵」這一概念原本來自於化學和熱力學，用於度量能量退化的指標，即熵越高，物體或系統的做功能力越低。
編碼過程中按熵原理不丟失任何資訊的編碼。資訊熵為信源的平均資訊量（不確定性的度量）。
常見的熵編碼有：夏農(shannon)編碼、哈夫曼(huffman)編碼和算術編碼(arithmetic coding)。
基於上下文的二進位制算術編碼（context-based adaptive binary arithmetic coding,cabac）將自適應二
進製算術編碼和上下文模型相結合。是h.265/hevc的主要熵編碼方案。
2.熵編碼的實現方式之哈夫曼編碼
<1>.哈夫曼編碼概述
哈夫曼編碼(huffman coding)，又稱霍夫曼編碼，是一種編碼方式，哈夫曼編碼是可變字長編碼(vlc)的一種。
huffman於2023年提出一種編碼方法，該方法完全依據字元出現概率來構造異字頭的平均長度最短的碼字，有時稱
之為最佳編碼，一般就叫做huffman編碼（有時也稱為霍夫曼編碼）。
<2>.哈夫曼編碼目的
哈夫曼編碼，主要目的是根據碼字使用頻率來最大化節省字元（編碼）的儲存空間。
<3>.哈夫曼編碼樹
原理舉例：假如a,b,c,d,e五個字元，出現的權值(即概率)分別為0.1,0.1,0.15,0.3,0.35,第先取兩個最小權值作為左右子樹構造乙個哈夫曼樹，每一步都取出兩個最小權值來構造樹。
哈夫曼編碼 哈夫曼樹
1.定義 哈夫曼編碼主要用於資料壓縮。哈夫曼編碼是一種可變長編碼。該編碼將出現頻率高的字元，使用短編碼 將出現頻率低的字元，使用長編碼。變長編碼的主要問題是，必須實現非字首編碼，即在乙個字符集中，任何乙個字元的編碼都不是另乙個字元編碼的字首。如 0 10就是非字首編碼，而0 01不是非字首編碼。2....
哈夫曼樹 哈夫曼編碼
定義從a結點到b結點所經過的分支序列為從a結點到b結點的路徑 定義從a結點到b結點所進過的分支個數為從a結點到b結點的路徑長度 從二叉樹的根結點到二叉樹中所有結點的路徑長度紙盒為該二叉樹的路徑長度 huffman樹 帶權值路徑長度最小的擴充二叉樹應是權值大的外界點舉例根結點最近的擴充二叉樹，該樹即為...
哈夫曼編碼 哈夫曼樹
哈夫曼樹是乙個利用權值進行優化編碼的乙個比較奇怪的樹，他的實現比較簡單，用途也比較單一。哈夫曼樹的實現，實現要求 通過哈夫曼樹可以保證在編碼過程中不會出現例如 1000和100這樣的編碼規則，否則就會編碼失敗，因為1000和100在某些情況下的編碼會一模一樣。通過哈夫曼樹可以保證權值大的值進行編碼時...