1.全角與半角的區別
漢字的特點使我們碰到了兩個基本且又非常重要的概念,即全角與半角。形象的說,在使用英文輸入法時,電腦屏幕上,一個英文字符(如a)所占的位置,人們稱其為半角,而一個漢字所占的位置則等於兩個英文字符,故稱其為全角。
英文輸入法下,無論是輸入字母、符號還是數字,始終都只占一個英文字符的位置,即半角。但在中文輸入法下,則會有全角半角兩種選擇,對中文字符來說,這兩種選擇對其沒有影響,它始終都要占兩個英文字符的位置,但對此狀態下輸入的符號、數字以及英文字母來說,就顯得很重要,如以下所示:
china
china
前者輸入選擇的是半角,後者為全角。在選擇全角後,即便是字母、符號、數字都無一例外地要被當成漢字進行處理,視覺上看,由於它們占兩個英文字符的位置,顯得別扭了許多。
2.全角與半角的轉化
Ansi多字節字體集在中文(漢字、中文符號)下即GBK編碼,英文(英文字母、英文符號)下為ASCII碼,一般來說,Ansi編碼的文本便於程序的處理。對文本中字符串操作前,建議統一使用全角或半角。比如全角的空格“ ”(對應的GBK編碼A1A1),而半角的空格“ ”(對應的ASCII編碼為\x20),如果文本中混合使用,要查找空格位置或按空格分割段落時,顯然兩種空格會帶來不必要的麻煩。文本中的內容可分為以下四類:
分類 解釋 轉化方法 漢字以及中文字符 如:“中國”、“好”等漢字和“……”“——”等中文中的特有符號,這些只能是全角,不存在轉化的問題 NULL 英文字母與英文符號 指ASCII表中33-126對應的字符,如:!*+012abc{}等。它們有全角和半角兩種形式,例如上述的china與china 半角轉全角:前添加字節A3,原字節最高位置1由此,全角轉半角的程序如下
/*
*作者:侯凱
*說明:全角與半角相互轉化
*日期:2013-6-9
*/
#include <iostream>
#include <fstream>
#include <string>
using std::string;
using namespace std;
const char sbc_high = -93; //全角字符的第一個字節為A3
const char sbc_space = -95; //全角空格為A1A1
//全角轉半角
string SBC2DBC(const string &sbc)
{
string dbc = "";
int len = sbc.length();
for (int i=0; i<len; ++i)
{
if (sbc[i] > 0) //已經是單字節字符,或者是控制字符
{
dbc.append(1, sbc[i]);
}
else
{
if (sbc[i] == sbc_high) //全角的英文字母或全角英文符號,如!(A3A1)
{
dbc.append(1, sbc[i+1]&0x7f);
}
else if (sbc[i]==sbc_space && sbc[i+1]==sbc_space) //單獨處理空格
{
dbc.append(1, ' ');
}
else //針對漢字以及~……等中文符號
{
dbc += sbc.substr(i, 2);
}
++i;
}
}
return dbc;
}
半角轉全角的程序如下
//半角轉全角
string DBC2SBC(const string &dbc)
{
string sbc = "";
int len = dbc.length();
for (int i=0; i<len; ++i)
{
if (dbc[i] < 0) //已經是雙字節字符,或者是漢字及中文符號
{
sbc += dbc.substr(i, 2);
++i;
}
else if (dbc[i] == ' ') //單獨處理空格
{
sbc += " ";
}
else
{
if (dbc[i]>=33 && dbc[i]<=126)//半角的英文字母或半角英文符號
{
sbc.append(1, sbc_high);
sbc.append(1, dbc[i]|0x80);
}
else
{
sbc.append(1, dbc[i]);//控制字符
}
}
}
return sbc;
}
處理一個文本轉化的示例程序如下
//處理txt文本的簡單例子
void ProcessFile(const char* filename)
{
ifstream infile;
string strLine = "";
string strResult = "";
infile.open(filename);
if (infile)
{
while (!infile.eof())
{
getline(infile,strLine);
strResult += strLine+"\n";
}
}
infile.close();
strResult = SBC2DBC (strResult);//轉化
ofstream outfile;
outfile.open (filename);
outfile.write (strResult.c_str(), strResult.length());
outfile.flush();
outfile.close();
}
3.unicode編碼下的轉化
在實際的工作中,可能碰到unicode編碼的文本。在這種情況下,半角與全角的轉化過程與上述方法一致,只需要處理“英文字母與英文符號”和“空格”即可。當然,unicode編碼下,所有字符都用兩個字節表示,如半角的空格為\x0020,全角的空格為\x3000,(unicode編碼詳見:http://www.cnblogs.com/houkai/archive/2013/06/04/3116955.html),這樣避免了字符的添加或丟棄,處理更為簡單。如需Unicode編碼表,可下載。 轉化方法:
a.全角空格為12288,半角空格為32
b.其他字符半角(33-126)與全角(65281-65374)的對應關系是:均相差65248
程序實現比較簡單,以UTF8轉ANSI中的changeTxtEncoding函數為基礎,改寫後示例如下:
//原函數的功能是實現UTF8編碼的szU8字符轉unicode,unicode再轉Ansi
//這裡,在UTF8轉unicode後添加了“全角轉半角程序”部分
char* changeTxtEncoding(char* szU8)
{
int wcsLen = ::MultiByteToWideChar(CP_UTF8, NULL, szU8, -1, NULL, 0);
wchar_t* wszString = new wchar_t[wcsLen];
::MultiByteToWideChar(CP_UTF8, NULL, szU8, -1, wszString, wcsLen);
//全角轉半角程序
//wszString是unicode編碼
for (int i=0; i<wcsLen; i++)
{
if(wszString[i]==12288) //空格
{
wszString[i] = 32;
}
if( (wszString[i]>=65281) && (wszString[i]<=65374) )//其他字符
{
wszString[i] -= 65248;
}
}
int ansiLen = ::WideCharToMultiByte(CP_ACP, NULL, wszString, -1, NULL, 0, NULL, NULL); //wcslen(wszString)
char* szAnsi = new char[ansiLen];
::WideCharToMultiByte(CP_ACP, NULL, wszString, -1, szAnsi, ansiLen, NULL, NULL);
delete[] wszString;
return szAnsi;
}