編碼和換行

最近在用node處理遮蔽字的時候需要讀取乙個檔案，原本編碼是utf8，但是拿到的遮蔽字編碼是gbk，所以需要對編碼進行轉換，伺服器是linux。

var illelg = fs.readfilesync(filepath).split('\r\n');

這是之前讀取的utf8檔案，結尾是'^m$' 也就是換行回車，拿到的gbk也是按照這個結尾的，分割('\r\n')是沒問題的，但是我用webstorm轉碼了，把gbk編碼轉成utf8，在linux開啟的時候就只剩下'$',然後在分割的時候會有問題，split('\n');

unix(或linux)系統中，每行結尾只有換行

\n,windows

中每行的結尾是

\n\r,mac

中每行的結尾只有

\r,所以在

windows

裡開啟unix

、mac

中的檔案，所有的文字會變成一行，而

windows

裡的檔案在

unix/mac

開啟的話，在每行的結尾可能會多乙個

^m符號

關於換行的問題可以看這篇文章：

主要說的是編碼問題，把gbk轉碼成utf8，需要用到乙個模組iconv。

fs檔案系統用readfilesync讀取檔案的時候，如果不指定編碼，會返回乙個buffer例項，或者也可以加'binary',buffer例項就是二進位制的，可以轉換其他的編碼，不過buffer支援轉換的物件沒有gbk。

ascii utf8 utf16le：utf-16的小端編碼，支援大於u+10000的四位元組字元。 ucs2：utf16le的別名。 base64

hex：將每個位元組轉為兩個十六進製制字元。

所以需要用到iconv模組。

var iconv = require('iconv-lite')

然後將讀取到的檔案轉換，上面讀取遮蔽字檔案按照行分割，對於不同系統分割也有不同，需要在轉碼之後在分割，開始分割會是乙個陣列：

var fs = require('fs');
var iconv = require('iconv-lite');
var fsread = fs.readfilesync(filepath/*,'binary'*/);
var result = iconv.decode(fsread,'gbk');

對於fs會或讀取到乙個buffer例項，如果其他方式獲取到的不是buffer例項，可以轉一下

new buffer(str,'binary');

node中的buffer可以看一下api文件。

編碼和換行

html textarea換行和dom換行

Base64編碼換行問題

csv編碼格式，儲存換行問題

編碼和換行

html textarea換行和dom換行

Base64編碼換行問題

csv編碼格式，儲存換行問題

相關推薦