php iconv() : Detected an illegal character in input string


Posted in PHP onDecember 05, 2010

开始是这样用的
$str = iconv('UTF-8', 'GB2312', unescape(isset($_GET['str'])? $_GET['str']:''));
上线后报一堆这样的错:iconv() : Detected an illegal character in input string

考虑到GB2312字符集比较小,换个大的吧,于是改成GBK:
$str = iconv('UTF-8', 'GBK', unescape(isset($_GET['str'])? $_GET['str']:''));
上线后还是报同样的错!

再认真读手册,发现有这么一段:
If you append the string //TRANSLIT to out_charset transliteration is activated. This means that when a character can't be represented in the target charset, it can be approximated through one or several similarly looking characters. If you append the string //IGNORE, characters that cannot be represented in the target charset are silently discarded. Otherwise, str is cut from the first illegal character.
于是改成:
$str = iconv('UTF-8', 'GBK//IGNORE', unescape(isset($_GET['str'])? $_GET['str']:''));
本地测试//IGNORE能忽略掉它不认识的字接着往下转,并且不报错,而//TRANSLIT是截掉它不认识的字及其后面的内容,并且报错。//IGNORE是我需要的。
现在等待上线看结果(这样不是好的做法,继续琢磨手册,上网搜搜看),呵呵。。。

在网上找到下面这篇文章,发现mb_convert_encoding也可以,但效率比iconv差。

转换字符串编码iconv与mb_convert_encoding的区别

iconv — Convert string to requested character encoding(PHP 4 >= 4.0.5, PHP 5)
mb_convert_encoding — Convert character encoding(PHP 4 >= 4.0.6, PHP 5)

用法:
string mb_convert_encoding ( string str, string to_encoding [, mixed from_encoding] )
需要先启用 mbstring 扩展库,在 php.ini里将; extension=php_mbstring.dll 前面的 ; 去掉

string iconv ( string in_charset, string out_charset, string str )
注意:
第二个参数,除了可以指定要转化到的编码以外,还可以增加两个后缀://TRANSLIT 和 //IGNORE,
其中:
//TRANSLIT 会自动将不能直接转化的字符变成一个或多个近似的字符,
//IGNORE 会忽略掉不能转化的字符,而默认效果是从第一个非法字符截断。
Returns the converted string or FALSE on failure.

使用:
1. 发现iconv在转换字符"-"到gb2312时会出错,如果没有ignore参数,所有该字符后面的字符串都无法被保存。不管怎么样,这个"-"都无法转换成功,无法输出。另外mb_convert_encoding没有这个bug.
2. mb_convert_encoding 可以指定多种输入编码,它会根据内容自动识别,但是执行效率比iconv差太多;如:$str = mb_convert_encoding($str,"euc-jp","ASCII,JIS,EUC-JP,SJIS,UTF- 8");“ASCII,JIS,EUC-JP,SJIS,UTF-8”的顺序不同效果也有差异
3. 一般情况下用 iconv,只有当遇到无法确定原编码是何种编码,或者iconv转化后无法正常显示时才用mb_convert_encoding 函数

from_encoding is specified by character code name before conversion. it can be array or string - comma separated enumerated list. If it is not specified, the internal encoding will be used.

$str = mb_convert_encoding($str, "UCS-2LE", "JIS, eucjp-win, sjis-win");
$str = mb_convert_encoding($str, "EUC-JP', "auto");

例子:
$content = iconv("GBK", "UTF-8", $content);
$content = mb_convert_encoding($content, "UTF-8", "GBK");

PHP 相关文章推荐
php正则
Jul 07 PHP
JAVA/JSP学习系列之七
Oct 09 PHP
php基础知识:类与对象(4) 范围解析操作符(::)
Dec 13 PHP
PHP parse_url 一个好用的函数
Oct 03 PHP
PHP 基于文件头的文件类型验证类函数
May 01 PHP
如何用php获取程序执行的时间
Jun 09 PHP
PHP以指定字段为索引返回数据库所取的数据数组
Jun 30 PHP
php出租房数据管理及搜索页面
May 23 PHP
PHP PDOStatement::columnCount讲解
Jan 30 PHP
PHP添加PNG图片背景透明水印操作类定义与用法示例
Mar 12 PHP
浅谈php调用python文件
Mar 29 PHP
PHP面向对象程序设计之对象克隆clone和魔术方法__clone()用法分析
Jun 12 PHP
php printf输出格式使用说明
Dec 05 #PHP
PHP执行zip与rar解压缩方法实现代码
Dec 05 #PHP
smarty模板嵌套之include与fetch性能测试
Dec 05 #PHP
php 学习资料零碎东西
Dec 04 #PHP
PHP访问MYSQL数据库封装类(附函数说明)
Dec 04 #PHP
PHP验证码类代码( 最新修改,完全定制化! )
Dec 02 #PHP
PHP项目开发中最常用的自定义函数整理
Dec 02 #PHP
You might like
php学习笔记(三)操作符与控制结构
2011/08/06 PHP
php 函数使用可变数量的参数方法
2017/05/02 PHP
PHP基于rabbitmq操作类的生产者和消费者功能示例
2018/06/16 PHP
javascript学习随笔(使用window和frame)的技巧
2007/03/08 Javascript
tbody元素支持嵌套的注意方法
2007/03/24 Javascript
JQuery CSS样式控制 学习笔记
2009/07/23 Javascript
Javascript面向对象编程(二) 构造函数的继承
2011/08/28 Javascript
js 中将多个逗号替换为一个逗号的代码
2014/06/07 Javascript
JavaScript字符串对象replace方法实例(用于字符串替换或正则替换)
2014/10/16 Javascript
使用Bootstrap typeahead插件实现搜索框自动补全的方法
2016/07/07 Javascript
js实现hashtable的赋值、取值、遍历操作实例详解
2016/12/25 Javascript
Bootstrap BootstrapDialog使用详解
2017/02/17 Javascript
收藏AngularJS中最重要的核心功能
2017/07/09 Javascript
详解vue 组件之间使用eventbus传值
2017/10/25 Javascript
在js代码拼接dom对象到页面上的模板总结
2018/10/21 Javascript
jsonp格式前端发送和后台接受写法的代码详解
2019/11/07 Javascript
[05:46]2018完美盛典-《同梦共竞》
2018/12/17 DOTA
盘点提高 Python 代码效率的方法
2014/07/03 Python
python实现基本进制转换的方法
2015/07/11 Python
python用BeautifulSoup库简单爬虫实例分析
2018/07/30 Python
python实现机器学习之多元线性回归
2018/09/06 Python
python最小生成树kruskal与prim算法详解
2019/01/17 Python
django的ORM模型的实现原理
2019/03/04 Python
python 标准差计算的实现(std)
2019/07/29 Python
一行Python代码过滤标点符号等特殊字符
2019/08/12 Python
如何掌握自荐信格式呢
2013/11/19 职场文书
单位成立周年感言
2014/01/26 职场文书
安全检查管理制度
2014/02/02 职场文书
乡镇干部十八大感言
2014/02/17 职场文书
计算机学生的自我评价分享
2014/02/18 职场文书
年终总结会议主持词
2014/03/17 职场文书
高中校园广播稿
2014/10/21 职场文书
2016七夕情人节感言
2015/12/09 职场文书
创业者如何撰写出一份打动投资人的商业计划书?
2019/07/02 职场文书
MySQL 5.7常见数据类型
2021/07/15 MySQL
Python Matplotlib绘制动画的代码详解
2022/05/30 Python