用PHP将Unicode 转化为UTF-8的实现方法(推荐)


Posted in PHP onFebruary 08, 2017

实例如下:

function unescape($str) {
  $str = rawurldecode($str);
  preg_match_all("/(?:%u.{4})|&#x.{4};|&#\d+;|.+/U",$str,$r);
  $ar = $r[0];
  //print_r($ar);
  foreach($ar as $k=>$v) {
    if(substr($v,0,2) == "%u"){
      $ar[$k] = iconv("UCS-2BE","UTF-8",pack("H4",substr($v,-4)));
 }
    elseif(substr($v,0,3) == "&#x"){
      $ar[$k] = iconv("UCS-2BE","UTF-8",pack("H4",substr($v,3,-1)));
 }
    elseif(substr($v,0,2) == "&#") {
       
      $ar[$k] = iconv("UCS-2BE","UTF-8",pack("n",substr($v,2,-1)));
    }
  }
  return join("",$ar);
}
echo unescape("紫星蓝");

今天有用户反馈,表单系统用户提交的数据中文会乱码。测试发现问题出在 iconv 转换上。
iconv('UCS-2',
'GBK',
'中文')
Google

搜索发现,原因是 Linux 服务器上 UCS-2 编码方式与 Winodws 不一致。

于是,我改成

 iconv('UCS-2BE',
'GBK',
'中文')
 试试,中文正常了

以下是有关两个平台

UCS-2 编码的潜规则:

1、 UCS-2 不等于 UTF-16。 UTF-16 每个字节使用 ASCII 字符范围编码,而 UCS-2 对每个字节的编码可以超出 ASCII 字符范围。UCS-2 和 UTF-16 对每个字符至多占两个字节,但是他们的编码是不一样的。

2、对于 UCS-2, windows 下默认是 UCS-2LE。用 MultibyteToWidechar(或者A2W)生成的是 UCS-2LE 的 unicode。windows记事本可以将文本保存为 UCS-2BE,相当于多了层转换。

3、 对于 UCS-2, linux 下默认是 UCS-2BE。用iconv(指定UCS-2)来转换生成的是 UCS-2BE 的 unicode。如果转换windows平台过来的 UCS-2, 需要指定 UCS-2LE。

4、鉴于windows和linux等多个平台对 UCS-2 的理解不同(UCS-2LE,UCS-2BE)。MS 主张 unicode 有个引导标志(UCS-2LE FFFE, UCS-2BE FEFF),以表明下面的字符是 unicode 并且判别 big-endian 或 little-endian。 所以从 windows 平台过来的数据发现有这个前缀,不用慌张。

5、 linux 的编码输出,比如从文件输出,从 printf 输出,需要控制台做适当的编码匹配(如果编码不匹配,一般和该程序编译时的编码有若干关系),而控制台的转换输入需要查看当前的系统编码。比如控制台当前的编码是 UTF-8, 那么 UTF-8 编码的东西能正确显示,GBK 就不能;同样,当前编码是 GBK, 就能显示 GBK 编码,后来的系统应该更智能的处理好更多的转换了。不过通过 putty 等终端还是需要设置好终端的编码转换以解除乱码的烦恼。

以上这篇用PHP将Unicode 转化为UTF-8的实现方法(推荐)就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

PHP 相关文章推荐
第三节 定义一个类 [3]
Oct 09 PHP
PHP array_push 数组函数
Dec 26 PHP
调试一段PHP程序时遇到的三个问题
Jan 17 PHP
有道搜索和IP138的IP的API接口(PHP应用)
Nov 29 PHP
zf框架的校验器使用使用示例(自定义校验器和校验器链)
Mar 13 PHP
php把数据表导出为Excel表的最简单、最快的方法(不用插件)
May 10 PHP
php自定义urlencode,urldecode函数实例
Mar 24 PHP
YII CLinkPager分页类扩展增加显示共多少页
Jan 29 PHP
关于Curl在Swoole协程中的解决方案详析
Sep 12 PHP
laravel5.6框架操作数据curd写法(查询构建器)实例分析
Jan 26 PHP
PHP正则表达式函数preg_replace用法实例分析
Jun 04 PHP
php封装实现钉钉机器人报警接口的示例代码
Aug 08 PHP
一键生成各种尺寸Icon的php脚本(实例)
Feb 08 #PHP
php正则提取html图片(img)src地址与任意属性的方法
Feb 08 #PHP
PHP正则匹配反斜杠'\'和美元'$'的方法
Feb 08 #PHP
php利用嵌套数组拼接与解析json的方法
Feb 07 #PHP
php获取文件名称和扩展名的方法
Feb 07 #PHP
php 常用的系统函数
Feb 07 #PHP
thinkphp修改配置进入默认首页的方法
Feb 07 #PHP
You might like
PHP中MVC模式的模板引擎开发经验分享
2011/03/23 PHP
php获取post中的json数据的实现方法
2011/06/08 PHP
thinkphp视图模型查询提示ERR: 1146:Table 'db.pr_order_view' doesn't exist的解决方法
2014/10/30 PHP
php实现读取和写入tab分割的文件
2015/06/01 PHP
PHP中余数、取余的妙用
2015/06/29 PHP
php页面,mysql数据库转utf-8乱码,utf-8编码问题总结
2015/08/27 PHP
PHP框架laravel的.env文件配置教程
2017/06/07 PHP
PHP实现链式操作的三种方法详解
2017/11/16 PHP
基于PHP+Mysql简单实现了图书购物车系统的实例详解
2020/08/06 PHP
IE与Firefox下javascript getyear年份的兼容性写法
2007/12/20 Javascript
jquery+json实现的搜索加分页效果
2010/03/31 Javascript
利用jQuery简单实现产品展示图片左右滚动功能(示例代码)
2014/01/02 Javascript
原生javascript实现图片滚动、延时加载功能
2015/01/12 Javascript
HTML5canvas 绘制一个圆环形的进度表示实例
2016/12/16 Javascript
如何抽象一个Vue公共组件
2017/10/17 Javascript
Node.js的Koa实现JWT用户认证方法
2018/05/05 Javascript
实现一个 Vue 吸顶锚点组件方法
2019/07/10 Javascript
JS变量提升原理与用法实例浅析
2020/05/22 Javascript
tensorflow实现简单的卷积网络
2018/05/24 Python
python 公共方法汇总解析
2019/09/16 Python
Python基于内置库pytesseract实现图片验证码识别功能
2020/02/24 Python
Python pip安装模块提示错误解决方案
2020/05/22 Python
基于 HTML5 WebGL 实现的医疗物流系统
2019/10/08 HTML / CSS
Under Armour西班牙官网:美国知名的高端功能性运动品牌
2018/12/12 全球购物
如何写毕业求职自荐信
2013/11/06 职场文书
杠杆的科学教学反思
2014/01/10 职场文书
保安岗位职责
2014/02/21 职场文书
毕业生自荐信如何写
2014/03/24 职场文书
保护环境建议书400字
2014/05/13 职场文书
元旦趣味活动方案
2014/08/22 职场文书
乡镇三严三实学习心得体会
2014/10/13 职场文书
致地震灾区的慰问信
2015/03/23 职场文书
同学聚会通知短信
2015/04/20 职场文书
小学教师党员承诺书
2015/04/27 职场文书
个人维稳承诺书
2015/05/04 职场文书
2015年医院后勤工作总结
2015/05/20 职场文书