python 字串編碼問題

2021-08-14 12:06:53 字數 1071 閱讀 9333

字串還有乙個編碼問題。

因為計算機只能處理數字,如果要處理文字,就必須先把文字轉換為數字才能處理。最早的計算機在設計時採用8個位元(bit)作為乙個位元組(byte),所以,乙個位元組能表示的最大的整數就是255(二進位制11111111=十進位制255),0 - 255被用來表示大小寫英文本母、數字和一些符號,這個編碼表被稱為ascii編碼,比如大寫字母 a 的編碼是65,小寫字母 z 的編碼是122。

如果要表示中文,顯然乙個位元組是不夠的,至少需要兩個位元組,而且還不能和ascii編碼衝突,所以,中國制定了gb2312編碼,用來把中文編進去。

類似的,日文和韓文等其他語言也有這個問題。為了統一所有文字的編碼,unicode應運而生。unicode把所有語言都統一到一套編碼裡,這樣就不會再有亂碼問題了。

unicode通常用兩個位元組表示乙個字元,原有的英文編碼從單位元組變成雙位元組,只需要把高位元組全部填為0就可以。

因為python的誕生比unicode標準發布的時間還要早,所以最早的python只支援ascii編碼,普通的字串'abc'在python內部都是ascii編碼的。

python在後來新增了對unicode的支援,以unicode表示的字串用u'...'表示,比如:

print u'中文'

中文

注意: 不加 u ,中文就不能正常顯示。

unicode字串除了多了乙個u之外,與普通字串沒啥區別,轉義字元和多行表示法仍然有效:

轉義:

u'中文\n日文\n韓文'
多行:

u'''第一行

第二行'''

raw+多行:

ur'''python的unicode字串支援"中文",

"日文",

"韓文"等多種語言'''

如果中文字串在python環境下遇到 unicodedecodeerror,這是因為.py檔案儲存的格式有問題。可以在第一行新增注釋

# -*- coding: utf-8 -*-
目的是告訴python直譯器,用utf-8編碼讀取源**。然後用notepad++ 另存為... 並選擇utf-8格式儲存。

出處:慕課網

python字串編碼問題

問題 程式如下 coding utf 8 raw input u 輸入 輸出 但是對print語句,卻沒有問題 coding utf 8 print u 輸入 原因可能是raw input函式在接受引數u 輸入 時,採用的是ascii解碼方式,而首行注釋 coding utf 8,只是宣告.py檔案...

Python字串的編碼問題

字串在python內部的表示是 unicode 編碼,因此,在做編碼轉換時,通常需要以unicode作為中間編碼,即先將其他編碼的字串解碼 decode 成unicode,再從unicode編碼 encode 成另一種編碼。decode的作用是將其他編碼的字串轉換成unicode編碼,如str1.d...

Python字串編碼

在python中有些特殊的地方是存在兩種字串,分別為str和unicode字串,他們都繼承自basestring。如 s hello world s為str us u hello world us為unicode。使用help str 和help unicode 可以檢視各自說明,他們都有decod...