字符集与编码总结

导读:本篇文章讲解 字符集与编码总结,希望对大家有帮助,欢迎收藏,转发!站点地址:www.bmabk.com

概述

编码类型

charset=iso-8859-1是西欧的编码,代表说明网站是采用的编码是英文;
charset=gb2312代表说明网站是采用的编码是简体中文;
charset=utf-8代表世界通用的语言编码;
charset=big5代表说明网站是采用的编码是繁体中文;
charset=euc-kr代表说明网站是采用的编码是韩文;
…等等有很多编码。
最常用到的是charset=gb2312、charset=iso-8859-1和charset=utf-8
charset=utf-8这个编码可以用到中文、韩文、日文等世界上所有语言编码上。
下面讲讲这几个的区别:

字符集与编码

各个国家和地区所制定的不同 ANSI 编码标准中,都只规定了各自语言所需的“字符”。比如:汉字标准(GB2312)中没有规定韩国语字符怎样存储。这些 ANSI 编码标准所规定的内容包含两层含义:

  1. 使用哪些字符。也就是说哪些汉字,字母和符号会被收入标准中。所包含“字符”的集合就叫做“字符集”。
  2. 规定每个“字符”分别用一个字节还是多个字节存储,用哪些字节来存储,这个规定就叫做“编码”。
    各个国家和地区在制定编码标准的时候,“字符的集合”和“编码”一般都是同时制定的。因此,平常我们所说的“字符集”,比如:GB2312, GBK, JIS 等,除了有“字符的集合”这层含义外,同时也包含了“编码”的含义。
    “UNICODE 字符集”包含了各种语言中使用到的所有“字符”。用来给 UNICODE 字符集编码的标准有很多种,比如:UTF-8, UTF-7, UTF-16, UnicodeLittle, UnicodeBig 等。
    1、ISO-8859-1:
    最简单的编码规则,每一个字节直接作为一个 UNICODE 字符。比如,[0xD6, 0xD0] 这两个字节,通过 iso-8859-1 转化为字符串时,将直接得到 [0x00D6, 0x00D0] 两个 UNICODE 字符,即 “ÖД。
    反之,将 UNICODE 字符串通过 iso-8859-1 转化为字节串时,只能正常转化 0~255 范围的字符。
    2、GB2312,BIG5,Shift_JIS,ISO-8859-2
    把 UNICODE 字符串通过 ANSI 编码转化为“字节串”时,根据各自编码的规定,一个 UNICODE 字符可能转化成一个字节或多个字节。
    反之,将字节串转化成字符串时,也可能多个字节转化成一个字符。比如,[0xD6, 0xD0] 这两个字节,通过 GB2312 转化为字符串时,将得到 [0x4E2D] 一个字符,即 ‘中’ 字。
    “ANSI 编码”的特点:
  • 这些“ANSI 编码标准”都只能处理各自语言范围之内的 UNICODE 字符。
  • “UNICODE 字符”与“转换出来的字节”之间的关系是人为规定的。
    3、UTF-8,UTF-16,UnicodeBig
    与“ANSI 编码”类似的,把字符串通过 UNICODE 编码转化成“字节串”时,一个 UNICODE 字符可能转化成一个字节或多个字节。
    与“ANSI 编码”不同的是:
  • 这些“UNICODE 编码”能够处理所有的 UNICODE 字符。
  • “UNICODE 字符”与“转换出来的字节”之间是可以通过计算得到的。
    如何相互转换呢?
    最好用记事本打开文件,修改字符编码为utf-8,然后另存为,选择编码为utf-8。

参考

iso-8859-1和utf-8有什么不同

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。

文章由极客之音整理,本文链接:https://www.bmabk.com/index.php/post/99909.html

(0)
小半的头像小半

相关推荐

极客之音——专业性很强的中文编程技术网站,欢迎收藏到浏览器,订阅我们!