Javascript 计算字符串在localStorage中所占字节数


Posted in Javascript onOctober 21, 2015

最近项目有个需求要用js计算一串字符串写入到localStorage里所占的内存,众所周知的,js是使用Unicode编码的。而Unicode的实现有N种,其中用的最多的就是UTF-8和UTF-16。因此本文只对这两种编码进行讨论。

下面这个定义摘自维基百科(http://zh.wikipedia.org/zh-cn/UTF-8),做了部分删减。

UTF-8(8-bit Unicode Transformation Format)是一种针对Unicode的可变长度字符编码,可以表示Unicode标准中的任何字符,且其编码中的第一个字节仍与ASCII相容,使用一至四个字节为每个字符编码

其编码规则如下:

字符代码在000000 ? 00007F之间的,用一个字节编码;

000080 ? 0007FF之间的字符用两个字节;
000800 ? 00D7FF 和 00E000 ? 00FFFF之间的用三个字节,注: Unicode在范围 D800-DFFF 中不存在任何字符;
010000 ? 10FFFF之间的用4个字节。

而UTF-16 则是定长的字符编码,大部分字符使用两个字节编码,字符代码超出 65535 的使用四个字节,如下:

000000 ? 00FFFF 两个字节;
010000 ? 10FFFF 四个字节。

一开始认为既然页面用的是UTF-8编码,那么存入localStorage的字符串,应该也是用UTF-8编码的。但后来测试发现,明明计算出的size是不到5MB,存入localStorage却抛异常了。想了想,页面的编码是可以改的。如果localStorage按照页面的编码存字符串,不就乱套了?浏览器应该都是使用UTF-16编码的。用UTF-16编码计算出5MB的字符串,果然顺利写进去了。超过则失败了。

好了,附上代码实现。计算规则就是上面写的,为了计算速度,把两个for循环分开写了。

/**
   * 计算字符串所占的内存字节数,默认使用UTF-8的编码方式计算,也可制定为UTF-16
   * UTF-8 是一种可变长度的 Unicode 编码格式,使用一至四个字节为每个字符编码
   *
   * 000000 - 00007F(128个代码)   0zzzzzzz(00-7F)               一个字节
   * 000080 - 0007FF(1920个代码)   110yyyyy(C0-DF) 10zzzzzz(80-BF)       两个字节
   * 000800 - 00D7FF
    00E000 - 00FFFF(61440个代码)  1110xxxx(E0-EF) 10yyyyyy 10zzzzzz      三个字节
   * 010000 - 10FFFF(1048576个代码) 11110www(F0-F7) 10xxxxxx 10yyyyyy 10zzzzzz 四个字节
   *
   * 注: Unicode在范围 D800-DFFF 中不存在任何字符
   * {@link http://zh.wikipedia.org/wiki/UTF-8}
   *
   * UTF-16 大部分使用两个字节编码,编码超出 65535 的使用四个字节
   * 000000 - 00FFFF 两个字节
   * 010000 - 10FFFF 四个字节
   *
   * {@link http://zh.wikipedia.org/wiki/UTF-16}
   * @param {String} str
   * @param {String} charset utf-8, utf-16
   * @return {Number}
   */
  var sizeof = function(str, charset){
    var total = 0,
      charCode,
      i,
      len;
    charset = charset ? charset.toLowerCase() : '';
    if(charset === 'utf-16' || charset === 'utf16'){
      for(i = 0, len = str.length; i < len; i++){
        charCode = str.charCodeAt(i);
        if(charCode <= 0xffff){
          total += 2;
        }else{
          total += 4;
        }
      }
    }else{
      for(i = 0, len = str.length; i < len; i++){
        charCode = str.charCodeAt(i);
        if(charCode <= 0x007f) {
          total += 1;
        }else if(charCode <= 0x07ff){
          total += 2;
        }else if(charCode <= 0xffff){
          total += 3;
        }else{
          total += 4;
        }
      }
    }
    return total;
  }
Javascript 相关文章推荐
传智播客学习之JavaScript基础篇
Nov 13 Javascript
用jquery和json从后台获得数据集的代码
Nov 07 Javascript
JavaScript?Apple设备检测示例代码
Nov 15 Javascript
js保留小数点后几位的写法
Jan 03 Javascript
JavaScript+html5 canvas绘制缤纷多彩的三角形效果完整实例
Jan 26 Javascript
Node.js实用代码段之获取Buffer对象字节长度
Mar 17 Javascript
JS前端笔试题分析
Dec 19 Javascript
js实现一键复制功能
Mar 16 Javascript
VUE2.0+ElementUI2.0表格el-table循环动态列渲染的写法详解
Nov 30 Javascript
深入理解使用Vue实现Context-Menu的思考与总结
Mar 09 Javascript
vue祖孙组件之间的数据传递案例
Dec 07 Vue.js
(开源)微信小程序+mqtt,esp8266温湿度读取
Apr 02 Javascript
深入解析JavaScript的闭包机制
Oct 20 #Javascript
JavaScript中字面量与函数的基本使用知识
Oct 20 #Javascript
JavaScript基本的输出和嵌入式写法教程
Oct 20 #Javascript
javascript省市级联功能实现方法实例详解
Oct 20 #Javascript
基于JavaScript实现移动端TAB触屏切换效果
Oct 20 #Javascript
js点击文本框后才加载验证码实例代码
Oct 20 #Javascript
javascript实现状态栏中文字动态显示的方法
Oct 20 #Javascript
You might like
世界咖啡生产者论坛呼吁:需要立即就咖啡价格采取认真行动
2021/03/06 咖啡文化
PHP 编程请选择正确的文本编辑软件
2006/12/21 PHP
PHP获取MAC地址的函数代码
2011/09/11 PHP
Google韩国首页图标动画效果
2007/08/26 Javascript
javascript中typeof操作符和constucor属性检测
2015/02/26 Javascript
javascript中的Base64、UTF8编码与解码详解
2015/03/18 Javascript
Javascript实现鼠标右键特色菜单
2015/08/04 Javascript
jQuery实现彩带延伸效果的网页加载条loading动画
2015/10/29 Javascript
学习使用bootstrap3栅格系统
2016/04/12 Javascript
纯JS实现图片验证码功能并兼容IE6-8(推荐)
2017/04/19 Javascript
npm国内镜像 安装失败的几种解决方案
2017/06/04 Javascript
SVG动画vivus.js库使用小结(实例代码)
2017/09/14 Javascript
vue 组件高级用法实例详解
2018/04/11 Javascript
浅谈Angular7 项目开发总结
2018/12/19 Javascript
详解Vue.js v-for不支持IE9的解决方法
2018/12/29 Javascript
node.js ws模块搭建websocket服务端的方法示例
2019/04/25 Javascript
jquery+php后台实现省市区联动功能示例
2019/05/23 jQuery
js实现for循环跳过undefined值示例
2019/07/02 Javascript
原生JS实现留言板功能
2020/02/08 Javascript
[44:50]DOTA2上海特级锦标赛B组小组赛#2 VG VS Fnatic第二局
2016/02/26 DOTA
给你选择Python语言实现机器学习算法的三大理由
2017/11/15 Python
Python语言描述最大连续子序列和
2017/12/05 Python
python 每天如何定时启动爬虫任务(实现方法分享)
2018/05/21 Python
HTML5使用Audio标签实现歌词同步的效果
2016/03/17 HTML / CSS
社会治安综合治理管理责任书
2014/04/16 职场文书
和谐家庭演讲稿
2014/05/24 职场文书
运动会加油口号
2014/06/07 职场文书
模具设计与制造专业自荐书
2014/07/01 职场文书
环境建议书
2015/02/04 职场文书
房产证明范本
2015/06/19 职场文书
关于职业道德的心得体会
2016/01/18 职场文书
详解CSS玩转图片Base64编码
2021/05/25 HTML / CSS
Python中OpenCV实现查找轮廓的实例
2021/06/08 Python
python自动计算图像数据集的RGB均值
2021/06/18 Python
详解python的异常捕获
2022/03/03 Python
面试分析分布式架构Redis热点key大Value解决方案
2022/03/13 Redis