分享一个我自己用 scala 实现的 sql 执行引擎

[jadetang]

git 地址 https://github.com/jadetang/scala_sql

作用就是写一个简单的sql，然后在一个List<Map>上做运算，思路来源是现在公司实时计算所用的执行引擎，不过他们是用java写的

suppose there is a List called user,which contains these data:
[name:tsc,age:30,sex:male]
[name:syy,age:29,sex:female]
[name:dudu,age:1,sex:male]
[name:xiaohua,age:2,sex:null]
[name:tsc,age:19,sex:male]
[name:tsc,age:99,sex:female]
[name:tsc,age:30,sex:female]

then

Engine.query(user,"select count(user) as number,name from user group by name")
will result in：
[number:1,name:dudu]
[number:4,name:tsc]
[number:1,name:xiaohua]
[number:1,name:syy]

[feilaoda]

你公司用的Esper?
你这个有没有测试过在数据量很大时，超过1亿条，速度如何？

[ledkk]

先下下来瞅瞅

[jadetang]

@feilaoda 没有用ESPER，另外这个都是在内存中计算的，如果是1亿条，早就OOM了。我们的场景是，利用队列，一批一批的计算，结合外部的排重服务，例如bloomfilter计算去重的指标。

[jadetang]

@ledkk 目前只支持三种数据类型，int，double，string。没事的话，给个星吧。