请教一个 mysql 批量插入的问题

[mawerss1]

背景：

数据库是 mysql 5.7，
表结构：
id
data
modified_time

data 是一个很长的 json 串，需求是批量插入每次最多要几千条，插入前比较 modified_time 和插入的数据比较，时间戳比较新的插入，否则失败

现在我的做法是用 insert into on ON DUPLICATE KEY UPDATE，但是如何比较这个时间就不会了，试了用触发器来写，但是批量插入如果有一条时间对不上的话，整个 sql 就不会再执行了，没办法跳过，请教大家有更好的做法吗

[anjuyiyu]

id + 时间做一个临时表？
另：这里是否可以考虑下时间分片做日结表？

[Aresxue]

1.别用触发器；
2.考虑做分表；
3.在代码里做好数据的清洗，最好是先删除数据库中较老时间的数据然后再插入，能不用 update 就尽量规避；
4.注意调整 max_allowed_packet 的限制。

[mawerss1]

@Aresxue update 有什么问题吗