• 扩展ASCII码。扩展ASCII 字符是从128 到255（0x80-0xff）的字符。许多基于x86的系统都支持使用扩展（或“高”）ASCII。它将每个字符的第8 位用于确定附加的128 个特殊符号字符、外来语字母和图形符号。针对扩展的ASCII码，不同的国家有不同的字符集，所以它并不是国际标准。

        ASCII字符表见附录。

 

2，Latin1

3，UNICODE

 

        Unicode是国际组织制定的可以容纳世界上所有文字和符号的字符编码方案，用数字0-0x10FFFF来映射这些字符，最多可以容纳1114112个字符，或者说有1114112个码位。码位就是可以分配给字符的数字，UTF-8，UTF-16，UTF-32都是将数字转换到程序数据的编码方案。

 

        Unicode其实是Latin1的扩展。只有一个低字节的Uncode字符其实就是Latin1字符。所以Unicode字符集也兼容ASCII字符。

 

        Unicode又分为两种。UCS-2（用两个字节编码）和UCS-4（用四个字节编码）。UCS是Universal Character Set的简称，也就是通用字符集。

      UTF( Unicode Transformation Format )只是一种针对Unicode的编码方式，没有像Unicode那样存在字符与数字之间的对应关系。它的出现只是为了解决Unicode的不足。比如：

• 存储问题。事实证明，对可以用ASCII表示的字符使用UNICODE并不高效，因为Unicode比ASCII占用大一倍的空间，而对ASCII来说高字节的0对他毫无用处。UTF-8可以解决这个问题，因为它是一种变长字节的编码。比如0-127的Unicode字符（ASCII字符）转为UTF-8只需要一个字节。

5，GB2312

《信息交换用汉字编码字符集》是由中国国家标准总局1980年发布，1981年5月1日开始实施的一套国家标准，标准号是GB2312—1980。GB就是拼音guobiao的简称。适用于汉字处理、汉字通信等系统之间的信息交换，通行于*；新加坡等地也采用此编码。*几乎所有的中文系统和国际化的软件都支持GB2312。基本集共收入汉字6763个和非汉字图形字符682个。

GB2312采用双字节编码。所有字符集分成94个区，每区有94个位。每个区位上只有一个字符，因此可用所在的区和位来对汉字进行编码，称为区位码。把十六进制的区位码加上0x2020，就得到国标码。国标码加上0x8080，就得到常用的计算机机内码。所以区位码加上0xA0A0就得到了计算机内码。什么是计算机内码呢，通俗的将就是存储字符时在内存里面的整数。下面举个例子。

汉字“啊”是GB2312字符集中的第一个汉字，它的区位码为0x1001。如下图：

 0x1001加上0xA0A0就是0xB0A1，这就是“啊”的计算机内码。所以下面这段C程序将输出0xB0A1。

        GBK全称是《汉字内码扩展规范》，K应该是Kuo的首字母。它是1995年12月1日制订的，从时间上来看比GB2312晚了15年。为什么要制定这个字符集呢？大家很容易想到。GB2312有很多空余的位根本没有被使用，表示的汉子也只有区区6763个，这明显不足。
        
        GBK共收录了21003个汉字，完全兼容GB2312字符。比如“啊”在GBK中的编码还是0xB0A1。而且GBK不像B2312那样存在区位码与内码的区分。它的字符编码和在内码是相同的。

        GBK是如何兼容GB2312的呢？相信大家很容易理解。还是以“啊”为例。它在GB2312中的内码是0xB0A1，把它直接填到GBK编码表中的相应位置即可。

 

        目前中文版的WIN95、WIN98、WINDOWS NT以及WINDOWS 2000、WINDOWS XP、WIN 7等都支持GBK编码方案。

            

        GBK汉字字符集见附录。

        GB18030有两个版本：GB18030-2000和GB18030-2005。GB18030-2000是GBK的取代版本，它的主要特点是在GBK基础上增加了CJK统一汉字扩充A的汉字。GB18030-2005的主要特点是在GB18030-2000基础上增加了CJK统一汉字扩充B的汉字。所以GB18030也是向上兼容GB2312和GBK的。它我国继GB2312-1980和GB13000-1993之后最重要的汉字编码标准，是我国计算机系统必须遵循的基础性标准之一。

        BIG-5码是通行于*，香港地区的一个繁体字编码方案，俗称“大五码”。地区标准号为：CNS11643。共收录13,060个中文字，其中有二字为重覆编码。它并非当地的国家标准，而只是业界标准。

 

     根据上面的概念大家可以知道：Latin1是对ASCII的扩展，Unicode又是对Latin1的扩展。GBK是对GB2312的扩展，GB18030又是对GBK的扩展。BIG-5并非国家标准。而UTF是Unicode的编码方式，所以这里只介绍Unicode同UTF及Unicode同GB2312的转换。

 

       根据Unicode值范围，编码UTF-8需要的字节数在1到6之间。Unicode转换为UTF-8需要的字节数可以这样计算：如果Unicode小于0x80（ASCII字符），则转换后为1个字节。否则转换后的字节数为Unicode二进制位数加3再除以5。对应关系如下：

      从上图中大家可以看出：单字节的编码以0开始。多字节的编码高字节都是1...0开始（多少个1就表示多少个字节），而低字节都是10开始。这是为了区分UTF-8编码和其它编码。详细的转换规则是：

        小于0x80的Unicode字符直接对应单字节的UTF-8编码。大于0x80的Unicode字符转换时每次将其二进制位从低往高取出二进制位，每次取6位。最后不足位数时用0填充。

        比如汉字“啊”的Unicode编码为0x554a。二进制表示为：101 010101 001010。共有15个二进制位，编码UTF-8需要3个字节。

        3字节的UTF-8二进制格式为：1110XXXX 10XXXXXX 10XXXXXX。001010填入最低字节，010101填入中间字节，101填入最高字节。最后的UTF-8编码即为：11100101 10010101 10001010，十六进制值为0xE5958A。

        UTF-16同Unicode一样，也有大端序列和小端序列的区别。

        两个字节的Unicode字符将编码两个字节UTF-16，而且编码值是相同的。

        超过两个字节的Unicode字符将编码4个字节的UTF-16，但并不是简单的将Unicode分为高两个字节和低两个字节。具体转换关系参考*对UTF-16的解释。

 

         UTF-32同Unicode一样，也有大端序列和小端序列的区别。Unicode的UTF-32编码就是其对应的32位无符号整数，不需要转换。

 

        Windows提供的API WideCharToMultiByte 可以将Unicode转换为UTF编码，不过它的参数中只提供了同UTF-7及UTF-8的转化。而且wchat_t是两个字节的,超过0xFFFF的Unicode字符这个函数也无能为力。

 

        Unicode是国际组织制定的，而GB18030是中国制定的，这两个编码毫无关系，要转换只能一个个字符查表。

        WideCharToMultiByte 同样可以将Unicode转换为GB18030编码。我不清楚这个函数的具体实现，我猜是查表吧，不然效率会很低。

 

        Unicode字符同GBK汉字的转换见附录。