用函数模板,写一个简单高效的 JSON 查询器的方法介绍


Posted in Javascript onApril 17, 2013

JSON可谓是JavaScript的亮点,它能用优雅简练的代码实现Object和Array的初始化。同样是基于文本的数据定义,它比符号分隔更有语义,比XML更简洁。因此越来越多的JS开发中,使用它作为数据的传输和储存。

JS数组内置了不少有用的方法,方便我们对数据的查询和筛选。例如我们有一堆数据:

var heros = [
        // 名============攻=====防=======力量====敏捷=====智力====
        {name:'冰室女巫', DP:38, AP:1.3, Str:16, Agi:16, Int:21},
        {name:'沉默术士', DP:39, AP:1.1, Str:17, Agi:16, Int:21},
        {name:'娜迦海妖', DP:51, AP:6.0, Str:21, Agi:21, Int:18},
        {name:'赏金猎人', DP:39, AP:4.0, Str:17, Agi:21, Int:16},
        {name:'剧毒术士', DP:45, AP:3.1, Str:18, Agi:22, Int:15},
        {name:'光之守卫', DP:38, AP:1.1, Str:16, Agi:15, Int:22},
        {name:'炼金术士', DP:49, AP:0.6, Str:25, Agi:11, Int:25}
        //...
    ];

要查询攻击大于40并且防御小于4的英雄,我们可以用Array的filter方法:
 var match = heros.filter(function(e) {
        return e.DP > 40 && e.AP < 4;
    });

返回得到一个数组,包括符合条件的2个结果。

相比手工去写循环判断,filter方法为我们提供了很大的方便。但它是基于函数回调的,所以每次使用必须写一个function,对于简单的查询很是累赘,而且使用回调效率也大大降低。但这是也没有办法的,想简单必然要牺牲一定性能。 如果能使用比这更简单的语句,并且完全拥有代码展开时效率,该有是多么完美的事。

先来想象下,要是能将上面的代码写成这样,并且查询速度和手写的遍历判断一样

    var match = heros.select('@DP>40 AND @AP<4');

看上去有点像SQL,连语法都换了?这样岂不是要写一个词法分析,语义解释等等等等一大堆的脚本引擎的功能了,没个几千上万行代码都搞不定,而且效率肯定更糟了。。。如果想到那么复杂,那么你还没深刻的理解脚本的精髓。但凡是脚本语言,都有运行时动态解释代码的接口,例如vbs的execute();js的eval(),new Function(),甚至创建一个<script>动态写入代码。

显然,要是能将另一种语言,翻译成js代码,那么就可直接交给宿主来执行了!

例如上面select中的字符,我们简单的将"@"替换成"e.", "AND"替换成"&&",于是就成了一个合法的js表达式,完全可以交给eval来执行。

所以我们要做的,就是将原始语句翻译成js语句来执行。并且为了提高效率,将翻译好的js表达式内联到一个上下文环境,生成一个可执行的函数体,而不是每次遍历中都依靠回调来判断。

于是,函数模版就要派上用场了。

函数模版简介

在C++里面,有宏和类模版这么个东西,可以让一些计算在编译阶段就完成了,大幅提升了运行时代码的性能。脚本虽然没有严格意义上的编译,但在第一次执行的时候会解析并充分的优化,这是目前主流浏览器相互竞争点。所以,我们要将重复eval的代码,镶嵌到事先提供的样板函数里:一个准备就绪,就差表达式计算的函数:

 /**
     * 模版: tmplCount
     * 功能: 统计arr数组中符合$express表达式的数量
     */
    function tmplCount(arr) {
        var count = 0;
        for(var i = 0; i < arr.length; i++) {
            var e = arr[i];
            if($express) {
                count++;
            }
        }
        return count;
    }

上面就是一个模板函数,遍历参数arr[]并统计符合$express的数量。除了if(...)内的表达式外,其他都已经准备就绪了。字符$express也可以换成其他标识,只要不和函数内其他字符冲突即可。

当我们需要实例化时,首先通过tmplCount.toString()将函数转成字符串格式,然后将其中的$express替换成我们想要的表达式,最后eval这串字符,得到一个Function类型的变量,一个模板函数的实例就产生了!

我们简单的演示下:

 /**
     * 函数: createInstance
     * 参数: exp
     *      一段js表达式字符串,用来替换tmplCount模板的$express
     * 返回:
     *      返回一个Function,模版tmplCount的实例
     */
    function createInstance(exp)
    {
        // 替换模板内的表达式
        var code = tmplCount.toString()
                    .replace('$express', exp);        // 防止匿名函数直接eval报错
        var fn = eval('0,' + code);

        // 返回模板实例
        return fn;
    }

    // 测试参数
    var student = [
        {name: 'Jane', age: 14},
        {name: 'Jack', age: 20},
        {name: 'Adam', age: 18}
    ];
    // demo1
    var f1 = createInstance('e.age<16');
    alert(f1(student));    //1个
    // demo2
    var f2 = createInstance('e.name!="Jack" && e.age>=14');
    alert(f2(student));    //2个

注意createInstance()的参数中,有个叫e的对象,它是在tmplCount模版中定义的,指代遍历时的具体元素。返回的f1,f2就是tmplCount模板的两个实例。最终调用的f1,f2函数中,已经内嵌了我们的表达式语句,就像我们事先写了两个同样功能的函数一样,所以在遍历的时候直接运行表达式,而不用回调什么的,效率大幅提升。

用函数模板,写一个简单高效的 JSON 查询器的方法介绍

其实说白了,tmplCount的存在仅仅是为了提供这个函数的字符串而已,其本身从来不会被调用。事实上用字符串的形式定义也一样,只不过用函数书写比较直观,方便测试。

值得注意的是,如果脚本后期需要压缩优化,那么tmplCount模板绝对不能参与,否则对应的"e."和"$express"都有可能发生变化。

JSON基本查询功能

函数模板的用处和实现介绍完了,再来回头看之前的JSON查询语言。我们只需将类似sql的语句,翻译成js表达式,并且生成一个函数模板实例。对于相同的语句,我们可以进行缓存,避免每次都翻译。

首先我们实现查询器的模板:

 var __proto = Object.prototype;
    //
    // 模板: __tmpl
    // 参数: $C
    // 说明: 记录并返回_list对象中匹配$C的元素集合
    //
    var __tmpl = function(_list) {
        var _ret = [];
        var _i = -1;
        for(var _k in _list) {
            var _e = _list[_k];
            if(_e && _e != __proto[_k]) {
                if($C)
                    _ret[++_i] = _e;
            }
        }
        return _ret;
    }.toString();

然后开始写Object的select方法:
 //
    // select方法实现
    //
    var __cache = {};    __proto.select = function(exp) {
        if(!exp)
            return [];

        var fn = __cache[exp];
        try {
            if(!fn) {
                var code = __interpret(exp);            //解释表达式
                code = __tmpl.replace('$C', code);      //应用到模版
                fn = __cache[exp] = __compile(code);    //实例化函数
            }
            return fn(this);                            //查询当前对象
        }
        catch(e) {
            return [];
        }
    }

其中__cache表实现了查询语句的缓存。对于重复的查询,性能可以极大的提升。
    function __compile() {
        return eval('0,' + arguments[0]);
    }

 __compile之所以单独写在一个空函数里,就是为了eval的时候有个尽可能干净的上下文环境。

__interpret是整个系统的重中之重,负责将查询语句翻译成js语句。它的实现见智见仁,但尽可能简单,不要过度分析语法。

具体代码查看:jsonselect.rar
出于演示,目前只实现部分基本功能。以后还可以加上 LIKE,BETWEEN,ORDER BY 等等常用的功能。

Demo

var heros = [
        // 名============攻=====防=======力量====敏捷=====智力====
        {name:'冰室女巫', DP:38, AP:1.3, Str:16, Agi:16, Int:21},
        {name:'沉默术士', DP:39, AP:1.1, Str:17, Agi:16, Int:21},
        {name:'娜迦海妖', DP:51, AP:6.0, Str:21, Agi:21, Int:18},
        {name:'赏金猎人', DP:39, AP:4.0, Str:17, Agi:21, Int:16},
        {name:'剧毒术士', DP:45, AP:3.1, Str:18, Agi:22, Int:15},
        {name:'光之守卫', DP:38, AP:1.1, Str:16, Agi:15, Int:22},
        {name:'炼金术士', DP:49, AP:0.6, Str:25, Agi:11, Int:25}
        //...
    ];

 // 查询:力量,敏捷 都超过20的
    // 结果:娜迦海妖
    var match = heros.select('@Str>20 AND @Agi>20');
    // 查询:“士”结尾的
    // 结果:沉默术士,剧毒术士,炼金术士
    var match = heros.select('right(@name,1)="士" ');
    // 查询:生命值 超过500的
    // 结果:炼金术士
    var match = heros.select('100 + @Str*19 > 500');

Javascript 相关文章推荐
Js 刷新框架页的代码
Apr 13 Javascript
JavaScript中“基本类型”之争小结
Jan 03 Javascript
javascript实现框架高度随内容改变的方法
Jul 23 Javascript
js中常用的Math方法总结
Jan 12 Javascript
angular directive的简单使用总结
May 24 Javascript
详解js静态资源文件请求的处理
Aug 01 Javascript
vue自定义全局组件(自定义插件)的用法
Jan 30 Javascript
手写Node静态资源服务器的实现方法
Mar 20 Javascript
Vue实现移动端左右滑动效果的方法
Nov 27 Javascript
js中位数不足自动补位扩展padLeft、padRight实现代码
Apr 06 Javascript
如何在Vue中使localStorage具有响应式(思想实验)
Jul 14 Javascript
Element Popover 弹出框的使用示例
Jul 26 Javascript
JS对img进行操作(换图片/切图/轮换/停止)
Apr 17 #Javascript
用显卡加速,轻松把笔记本打造成取暖器的办法!
Apr 17 #Javascript
js跑马灯代码(自写)
Apr 17 #Javascript
获取元素距离浏览器周边的位置的方法getBoundingClientRect
Apr 17 #Javascript
动态加载js和css(外部文件)
Apr 17 #Javascript
关于在IE下的一个安全BUG --可用于跟踪用户的系统鼠标位置
Apr 17 #Javascript
从数据结构分析看:用for each...in 比 for...in 要快些
Apr 17 #Javascript
You might like
PHP获得用户使用的代理服务器ip即真实ip
2006/12/31 PHP
php中curl、fsocket、file_get_content三个函数的使用比较
2014/05/09 PHP
php中将一段数据存到一个txt文件中并显示其内容
2014/08/15 PHP
php的dl函数用法实例
2014/11/06 PHP
PHP中addslashes与mysql_escape_string的区别分析
2016/04/25 PHP
Ajax::prototype 源码解读
2007/01/22 Javascript
IE 条件注释详解总结(附实例代码)
2009/08/29 Javascript
jquery命令汇总,方便使用jquery的朋友
2012/06/26 Javascript
Javascript对象中关于setTimeout和setInterval的this介绍
2012/07/21 Javascript
jquery zTree异步加载简单实例分享
2013/02/05 Javascript
JavaScript对象和字串之间的转换实例探讨
2013/04/21 Javascript
JS实现快速的导航下拉菜单动画效果附源码下载
2016/11/01 Javascript
AngularJs 利用百度地图API 定位当前位置 获取地址信息
2017/01/18 Javascript
BOM之navigator对象和用户代理检测
2017/02/10 Javascript
正则验证小数点后面只能有两位数的方法
2017/02/28 Javascript
js编写简单的聊天室功能
2017/08/17 Javascript
Angular2.0实现modal对话框的方法示例
2018/02/18 Javascript
vue-infinite-loading2.0 中文文档详解
2018/04/08 Javascript
详解Axios统一错误处理与后置
2018/09/26 Javascript
Javascript执行流程细节原理解析
2020/05/14 Javascript
使用Taro实现小程序商城的购物车功能模块的实例代码
2020/06/05 Javascript
使用python BeautifulSoup库抓取58手机维修信息
2013/11/21 Python
Python 闭包的使用方法
2017/09/07 Python
python实现一个简单的ping工具方法
2019/01/31 Python
Python函数装饰器常见使用方法实例详解
2019/03/30 Python
Python 整行读取文本方法并去掉readlines换行\n操作
2020/09/03 Python
用CSS3写的模仿iPhone中的返回按钮
2015/04/04 HTML / CSS
中学生检讨书范文
2014/11/03 职场文书
年度考核个人总结
2015/03/06 职场文书
我的1919观后感
2015/06/03 职场文书
刚学完怎么用Python实现定时任务,转头就跑去撩妹!
2021/06/05 Python
Java中多线程下载图片并压缩能提高效率吗
2021/07/01 Java/Android
jQuery实现广告显示和隐藏动画
2021/07/04 jQuery
go goroutine 怎样进行错误处理
2021/07/16 Golang
深入理解MySQL中MVCC与BufferPool缓存机制
2022/05/25 MySQL
mysql字段为NULL索引是否会失效实例详解
2022/05/30 MySQL