解决方法
length
函数对字符进行操作,而不是八位字节(AKA字节).字符的定义取决于编码.中文字符仍然是单个字符(如果编码设置正确!)但它们占用的空间超过一个八位字节.因此,Perl中字符串的长度取决于Perl认为该字符串所在的字符编码;唯一与字符编码无关的字符串长度是简单字节长度.
确保有问题的字符串标记为UTF-8并以UTF-8编码.例如,这产生3:
$perl -e 'print length("长")'
而这产生1:
$perl -e 'use utf8; print length("长")'
同样如下:
$perl -e 'use Encode; print length(Encode::decode("utf-8","长"))'
如果您从文件中获取中文字符,请确保在读取或写入之前将文件binmode $fh,’:utf8′;如果您从数据库获取数据,请确保数据库以UTF-8格式返回字符串(或使用Encode
为您执行此操作).
我不认为你必须拥有UTF-8中的所有东西,你真的只需要确保字符串被标记为具有正确的编码.我会使用UTF-8从前到后(甚至是横向),但因为它是Unicode的通用语言,如果你在任何地方使用它都会让事情变得更容易.
如果您打算处理非ASCII数据,您可能需要花一些时间阅读perlunicode手册页.