老哥们， redis 存 6030 条进去 4520，会有哪些可能

[iblessyou]

1.本地 windows 起了个 相同的代码，相同数据，就能全存进去，部署的服务器上 就怎么都对不上数。 2.此 redis 还有其他项目在用，但代码层面，可以排除影响。 3.每次都是 4520 4.配置里没设最大值限制 5.以前没出现过类似情况，这套代码部署过好多个服务器 6.KEY 绝对没有重复，这个反复验证过了 7.没看到哪报错了 …… w(ﾟДﾟ)w~~~~~ w(ﾟДﾟ)w~~~ w(ﾟДﾟ)w

[Repository]

哈哈哈，想起我大学老师的一句话，代码运行结果不对先思考自己的问题，肯定不是编译器错了

[moonsn]

分析一下没插进去的数据的特性？

[cz5424]

给 redis 大佬们发邮件，说你们程序有问题（手动狗头

[useben]

可能有什么定时任务在搞鬼?

[jifengg]

刚想说有没有可能是 redis 回收机制给回收了，但是你说每次都是 4520，那就不是了。先找找软件之外的原因吧。

[iblessyou]

@msg7086
@Umenezumi
刚又试了，每次插的时候取一下，都能取出来，但执行完后 总数就是不对 w(ﾟДﾟ)w

[iblessyou]

@Repository 我没怀疑编译器，现在就是在找到底是哪的问题

[Umenezumi]

@iblessyou 每插一次取两次即可。一次取本次插入的结果，一次取总条数。这样看更直观

[IMCA1024]

系统抖动

[iblessyou]

@rimutuyuan
@damean
@Foxkeh
@Jooooooooo
@lshero
@Repository
@useben
@jifengg

排查出来了……
尝试了存一条取一条，看日志是每个都可以取到的
然后查询的表刚好是个视图，就加了 limit 控制视图的数据量。
然后诡异的事情发生了……

表数据 100 条时，存入了 100 条
表数据 500 条时，存入了 500 条
表数据 1000 条时，存入了 768 条
表数据 600 条时，存入了 600 条
表数据 800 条时，存入了 800 条
表数据 1000 条时，存入了 1000 条
……

之后会反复出现类似问题，两次查询插入数量不一样，但是不管一样不一样后，哪怕清了 redis，再执行都会和之前是一样的数量。

猜猜最后是怎么找出的……













是这句查询 SQL 的坑
int rows =500;
....
String sql = "select * from Table t limit " + rows + " offset " + (i - 1) * rows;
....
这里他用了分页查询，每次查 1000 条把数据保存完了再查 500，
但是因为没使用排序，多次查询时，可能会每次的顺序不一样，导致上 500 条和下 500 查询出的可能会出现重复
加了个排序解决了

[iblessyou]

@Umenezumi 看楼上 解决了
这个错误有点低级，自己写的时候，一般都会习惯性加上排序，看别人代码反而反应不过来
吸取教训了

[Jooooooooo]

@iblessyou hhhh

果然诡异问题最后都是傻子原因, 我自己也经历过好多次

[msg7086]

@iblessyou 分页不加排序可还行。
而且插数据的话应该用流式取数据而不是分页吧，要不然每次取下一页的时候还要重查……

[jifengg]

果然还是被忽略的地方出了问题啊。