用 slick 流式读取 mysql 一个大表 700w, 在 map 的时候计数,发现到 360w 就停了, 请问下这是什么原因?
val source: Source[Event, NotUsed] = Slick.source(query1)
val sink: Sink[ProducerRecord[String, Event], Future[Done]] = Producer.plainSink(p)
var counter = 0;
val done: Future[Done] =
source
.map(
e =>
{
counter += 1
println(counter)
new ProducerRecord(topic, e.sid, EventFactory.build_event(e))
}
).runWith(sink)
这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。
V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。
V2EX is a community of developers, designers and creative people.