檔案編碼的判定（UTF8,UTF16），及轉換

1.首先根據bom來判定

utf-8的bom： ef bb bf；對應的十進位制數值是：239 187 191 如果檔案的開頭三個位元組與之相符則說明檔案的編碼是utf8的

utf-16le的bom： ff fe；對應的十進位制數值是： 255 254 如果檔案的開頭兩個位元組與之相符則說明對應的編碼是utf-16le

utf-16be的bom： fe ff ；對應的十進位制數值是：254 255 如果檔案的開頭兩個位元組與之相符則說明對應的編碼是utf-16be

2.bom不存在的情況判定

utf-8的判定，根據內容判定

utf-8的編碼規則：

字元位元組長度標誌位元組值

一位元組長 0******x

兩位元組長 110***xx 10******

三位元組長 1110***x 10****** 10******

四位元組長 11110*** 10****** 10****** 10******

**標誌位元組判定用到的資料**

定義陣列bthead 長度為4儲存用來判定標誌位元組的十進位制數值： 0，192， 224， 240

定義陣列btbitandvalue 長度為4儲存用來得到標誌位元組長度的十進位制數值：128： 224， 240， 248

**值判定用到的資料**

定義變數btvaluehead用來儲存值得標誌所對應的十進位制數值：128

定義變數btfixvalueand 儲存用來取得值的標誌的十進位制數值：192

a.以位元組方式讀取檔案中內容儲存到位元組陣列中

b.對a中讀取的檔案內容做loop操作。

首先對當前的位元組分別與btbitandvalue中的四個值進行位與操作，每次得到的值與bthead中的值比較，找到相等的值時可以根據當前的值來判定字元的位元組長度l。並執行下乙個迴圈，在跳過b的操作次數（l - 1）次時在執行b操作

c.取得值的標誌。將此致的值與btfixvalueand進行位與操作，將取得的值與btvaluehead進行比較，如果相等則對下乙個位元組繼續執行c操作，直到執行的次數是l-1次。如果不相等則說明不是utf-8編碼格式。

utf-16的判定與utf-8的判定類似只要知道編碼規則就可以。

3. 文字code的轉換操作

轉換操作用到的api：

多位元組轉寬位元組：multibytetowidechar

寬位元組轉多位元組：widechartomultibyte

msdn有詳細引數說明。

具體步驟：首先判定要儲存轉換結果字串的長度，相應引數設定成固定的值便可以得到。

其次，根據得到的長度分配儲存變數

最後，進行轉換。

注意分配的記憶體釋放問題。