亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb

首頁 > 學院 > 開發設計 > 正文

字符集和編碼方式

2019-11-14 11:30:31
字體:
來源:轉載
供稿:網友
1,字符:字符是抽象的最小文本單位。它沒有固定的形狀(可能是一個字形),而且沒有值?!癆”是一個字符,“€”(德國、法國和許多其他歐洲國家通用貨幣的標志)也是一個字符?!爸小薄皣边@是兩個漢字字符。字符僅僅代表一個符號,沒有任何實際值的意義。2,字符集:字符集是字符的集合。例如,漢字字符是中國人最先發明的字符,在中文、日文、韓文和越南文的書寫中使用。這也說明了字符和字符集之間的關系,字符組成字符集(iso8859-1,GB2312/GBK,unicode)。3,代碼點:字符集中的每個字符都被分配到一個“代碼點”。每個代碼點都有一個特定的唯一數值,稱為標值。該標量值通常用十六進制表示。4,代碼單元: 在每種編碼形式中,代碼點被映射到一個或多個代碼單元?!按a單元”是各個編碼方式中的單個單元。代碼單元的大小等效于特定編碼方式的位數:UTF-8 :UTF-8 中的代碼單元由 8 位組成;在 UTF-8 中,因為代碼單元較小的緣故,每個代碼點常常被映射到多個代碼單元。代碼點將被映射到一個、兩個、三個或四個代碼單元;UTF-16 :UTF-16 中的代碼單元由 16 位組成;UTF-16 的代碼單元大小是 8 位代碼單元的兩倍。所以,標量值小于 U+10000 的代碼點被編碼到單個代碼單元中;UTF-32:UTF-32  中的代碼單元由 32 位組成; UTF-32 中使用的 32 位代碼單元足夠大,每個代碼點都可編碼為單個代碼單元;GB18030:GB18030  中的代碼單元由 8 位組成;在 GB18030 中,因為代碼單元較小的緣故,每個代碼點常常被映射到多個代碼單元。代碼點將被映射到一個、兩個或四個代碼單元。5,舉例:

“中國北京香蕉是個大笨蛋”這是我定義的aka字符集;各字符對應代碼點為:北 00000001京 00000010香 10000001蕉 10000010是 10000100個 10001000大 10010000笨 10100000蛋 11000000中 00000100國 00001000下面是我定義的 zixia 編碼方案(8位),可以看到它的編碼中表示了aka字符集的所有字符對應的 代碼單元;北 10000001京 10000010香 00000001蕉 00000010是 00000100個 00001000大 00010000笨 00100000蛋 01000000中 10000100國 10001000所謂文本文件 就是我們按一定編碼方式將二進制數據表示為對應的文本如 00000001000000100000010000001000000100000010000001000000這樣的文件。我用一個支持 zixia編碼和aka字符集的記事本打開,它就按照編碼方案顯示為  “香蕉是個大笨蛋 ”如果我把這些字符按照GBK另存一個文件,那么則肯定不是這個,而是1100111111100011 1011110110110110 1100101011000111 1011100011110110 1011010011110011 1011000110111111 1011010110110000 110100001010

二,字符集1, 常用字符集分類ASCII及其擴展字符集作用:表語英語及西歐語言。位數:ASCII是用7位表示的,能表示128個字符;其擴展使用8位表示,表示256個字符。范圍:ASCII從00到7F,擴展從00到FF。ISO-8859-1字符集作用:擴展ASCII,表示西歐、希臘語等。位數:8位,范圍:從00到FF,兼容ASCII字符集。GB2312字符集作用:國家簡體中文字符集,兼容ASCII。位數:使用2個字節表示,能表示7445個符號,包括6763個漢字,幾乎覆蓋所有高頻率漢字。范圍:高字節從A1到F7, 低字節從A1到FE。將高字節和低字節分別加上0XA0即可得到編碼。BIG5字符集作用:統一繁體字編碼。位數:使用2個字節表示,表示13053個漢字。范圍:高字節從A1到F9,低字節從40到7E,A1到FE。GBK字符集作用:它是GB2312的擴展,加入對繁體字的支持,兼容GB2312。位數:使用2個字節表示,可表示21886個字符。范圍:高字節從81到FE,低字節從40到FE。GB18030字符集作用:它解決了中文、日文、朝鮮語等的編碼,兼容GBK。位數:它采用變字節表示(1 ASCII,2,4字節)??杀硎?7484個文字。范圍:1字節從00到7F; 2字節高字節從81到FE,低字節從40到7E和80到FE;4字節第一三字節從81到FE,第二四字節從30到39。UCS字符集作用:國際標準 ISO 10646 定義了通用字符集 (Universal Character Set)。它是與UNICODE同類的組織,UCS-2和UNICODE兼容。位數:它有UCS-2和UCS-4兩種格式,分別是2字節和4字節。范圍:目前,UCS-4只是在UCS-2前面加了0×0000。UNICODE字符集作用:為世界650種語言進行統一編碼,兼容ISO-8859-1。位數:UNICODE字符集有多個編碼方式,分別是UTF-8,UTF-16和UTF-32。2 ,按所表示的文字分類語言                                 字符集                                     正式名稱英語、西歐語                     ASCII,ISO-8859-1                MBCS 多字節簡體中文                             GB2312                                    MBCS 多字節繁體中文                             BIG5                                         MBCS 多字節簡繁中文                             GBK                                         MBCS 多字節中文、日文及朝鮮語         GB18030                                  MBCS 多字節各國語言                             UNICODE,UCS                    DBCS 寬字節

三,編碼UTF-8:采用變長字節 (1 ASCII, 2 希臘字母, 3 漢字, 4 平面符號) 表示,網絡傳輸, 即使錯了一個字節,不影響其他字節,而雙字節只要一個錯了,其他也錯了,具體如下:如果只有一個字節則其最高二進制位為0;如果是多字節,其第一個字節從最高位開始,連續的二進制位值為1的個數決定了其編碼的字節數,其余各字節均以10開頭。UTF-8最多可用到6個字節。

UTF-16:采用2字節,Unicode中不同部分的字符都同樣基于現有的標準。這是為了便于轉換。從 0×0000到0×007F是ASCII字符,從0×0080到0×00FF是ISO-8859-1對ASCII的擴展。希臘字母表使用從0×0370到 0×03FF 的代碼,斯拉夫語使用從0×0400到0×04FF的代碼,美國使用從0×0530到0×058F的代碼,希伯來語使用從0×0590到0×05FF的代 碼。中國、日本和韓國的象形文字(總稱為CJK)占用了從0×3000到0×9FFF的代碼;由于0×00在C語言及操作系統文件名等中有特殊意義,故很 多情況下需要UTF-8編碼保存文本,去掉這個0×00。舉例如下:UTF-16: 0×0080  = 0000 0000 1000 0000UTF-8:   0xC280 = 1100 0010 1000 0000UTF-32:采用4字節。優缺點UTF-8、UTF-16和UTF-32都可以表示有效編碼空間 (U+000000-U+10FFFF) 內的所有Unicode字符。使用UTF-8編碼時ASCII字符只占1個字節,存儲效率比較高,適用于拉丁字符較多的場合以節省空間。對于大多數非拉丁字符(如中文和日文)來說,UTF-16所需存儲空間最小,每個字符只占2個字節。Windows NT內核是Unicode(UTF-16),采用UTF-16編碼在調用系統API時無需轉換,處理速度也比較快。采用UTF-16和UTF-32會有Big Endian和Little Endian之分,而UTF-8則沒有字節順序問題,所以UTF-8適合傳輸和通信。UTF-32采用4字節編碼,一方面處理速度比較快,但另一方面也浪費了大量空間,影響傳輸速度,因而很少使用。

四,如何判斷字符集1,字節序首先說一下字節序對編碼的影響,字節序分為Big Endian字節序和Little Endian字節序。不同的處理器可能不一樣。所以,傳輸時需要告訴處理器當時的編碼字節序。對于前者而言,高位字節存在低地址,低字節存于高地址;后者相反。例如,0X03AB,Big Endian字節序0000: 0 30001: ABLittle Endian字節序是0000: AB0001: 0 32,編碼識別UNICODE,根據前幾個字節可以判斷UNICODE字符集的各種編碼,叫做Byte Order Mask方法BOM:UTF-8: EFBBBF (符合UTF-8格式,請看上面。但沒有含義在UCS即UNICODE中)UTF-16 Big Endian:FEFF (沒有含義在UCS-2中)UTF-16 Little Endian:FFFE (沒有含義在UCS-2中)UTF-32 Big Endian:0000FEFF (沒有含義在UCS-4中)UTF-32 Little Endian:FFFE0000 (沒有含義在UCS-4中)

GB2312:高字節和低字節的第1位都是1。

BIG5,GBK&GB18030:高字節的第1位為1。操作系統有默認的編碼,常為GBK,可以下載別的并升級。通過判斷高字節的第1位從而知道是ASCII或者漢字編碼。

來自 http://blog.csdn.NET/zhoubl668/article/details/6914183
發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb
久久这里只有精品99| 国内精久久久久久久久久人| 精品亚洲国产成av人片传媒| 奇门遁甲1982国语版免费观看高清| 国内精品久久久久影院 日本资源| 欧美做爰性生交视频| 国产一区二区日韩精品欧美精品| 亚洲激情久久久| 日韩精品欧美激情| 亚洲国产精品免费| 久久精品国产亚洲一区二区| 日韩激情在线视频| 国产精品久久久久久久久男| 亚洲男女自偷自拍图片另类| 成人做爰www免费看视频网站| 日本成人精品在线| 91免费高清视频| 国产亚洲精品美女久久久| 色偷偷噜噜噜亚洲男人的天堂| 欧美成人在线网站| 亚洲新中文字幕| xxx成人少妇69| 欧美日韩国产成人在线| 国产精品美女主播| 色综久久综合桃花网| 久久精品人人做人人爽| 国产精品嫩草影院一区二区| 亚洲www视频| 亚洲电影免费观看高清完整版在线观看| 国产亚洲一区二区精品| 欧美巨大黑人极品精男| 久久精品99久久久香蕉| 亚洲人成电影在线观看天堂色| 色妞色视频一区二区三区四区| 色偷偷噜噜噜亚洲男人| 成人av在线天堂| 中文字幕日韩av| 在线亚洲午夜片av大片| 亚洲国产精品久久久久秋霞蜜臀| 91精品久久久久久| 国产999精品| 91精品视频在线| 国产精品久久网| 日韩av影视综合网| 欧美精品videos性欧美| 岛国视频午夜一区免费在线观看| 国产精品视频一区二区三区四| 国产精品99导航| 国产精品一区二区三区久久| 欧美网站在线观看| 欧美国产日韩一区二区| 久久69精品久久久久久久电影好| 国产精品劲爆视频| 国产亚洲精品久久久| 国产欧美日韩免费看aⅴ视频| 一本久久综合亚洲鲁鲁| 日韩av片免费在线观看| 日韩免费在线观看视频| 韩国19禁主播vip福利视频| 国产va免费精品高清在线观看| 97免费视频在线播放| 日本欧美中文字幕| 欧美电影免费在线观看| 亚洲福利小视频| 日韩美女免费视频| 久久777国产线看观看精品| 国产精品96久久久久久又黄又硬| 国产精品小说在线| 亚洲男人天天操| 成人女保姆的销魂服务| 精品日本高清在线播放| 揄拍成人国产精品视频| 国产精品羞羞答答| 久久久成人的性感天堂| 欧美激情视频给我| 欧美性xxxxx极品娇小| 欧美视频二区36p| 亚洲日本欧美中文幕| 欧美中文在线字幕| 久久国产精品久久久久久久久久| 国产精品99久久久久久人| 日韩av一区二区在线观看| 一道本无吗dⅴd在线播放一区| 中文字幕在线观看日韩| 青青草成人在线| 国产91色在线播放| 中文字幕亚洲天堂| 亚洲日本aⅴ片在线观看香蕉| 久久99国产精品自在自在app| 久久福利网址导航| 亚洲a∨日韩av高清在线观看| 一区二区三区在线播放欧美| 日韩三级成人av网| 亚洲一区亚洲二区| 91视频国产高清| 亚洲免费精彩视频| 日韩在线欧美在线国产在线| 美女av一区二区| 777国产偷窥盗摄精品视频| 亚洲国产精品va在线观看黑人| 欧美美最猛性xxxxxx| 国产ts人妖一区二区三区| 国产精品一二三视频| 日韩成人网免费视频| 国产精品国产三级国产aⅴ9色| 久久久最新网址| 欧美精品18videosex性欧美| 国产啪精品视频| 欧美韩国理论所午夜片917电影| 理论片在线不卡免费观看| 91视频国产高清| 日韩成人中文电影| 亚洲一区二区福利| 久久国产精品免费视频| 欧美日韩国产二区| 日韩免费视频在线观看| 亚洲夜晚福利在线观看| 岛国av一区二区在线在线观看| 久久精品99无色码中文字幕| 国精产品一区一区三区有限在线| 日韩在线观看免费| 亚洲精品国产精品国产自| 欧美精品18videosex性欧美| 欧美精品久久久久久久免费观看| 欧美成人精品一区二区三区| 国产精品女主播视频| 欧美激情亚洲一区| 亚洲精品一区中文字幕乱码| 日韩亚洲精品视频| 久久夜精品va视频免费观看| 久久精品视频亚洲| 成人国产精品久久久久久亚洲| 亚洲美女av网站| 欧美成人精品激情在线观看| 欧美黄色片视频| 欧美一级淫片丝袜脚交| 国产精品日韩欧美综合| 欧美肥老太性生活视频| 欧美日韩综合视频网址| 国产精品久久久久999| 色99之美女主播在线视频| 欧美二区在线播放| 亚洲欧美日韩中文视频| 久久综合伊人77777蜜臀| 91av中文字幕| 日韩成人激情视频| 欧美xxxx综合视频| 国产婷婷97碰碰久久人人蜜臀| 国产精品美女主播| 亚洲加勒比久久88色综合| 亚洲精品丝袜日韩| 最近2019免费中文字幕视频三| 亚洲男人天堂手机在线| 丝袜亚洲欧美日韩综合| 国产69精品久久久| 在线观看91久久久久久| 菠萝蜜影院一区二区免费| 日韩精品中文字幕视频在线| 亚洲欧美日韩久久久久久| 91精品综合久久久久久五月天| 国产欧洲精品视频| 欧美中文字幕精品| 午夜精品福利在线观看| 26uuu日韩精品一区二区|