Oracle 数据库同步问题。

[xxdd]

目前需求是有 2 张表，一张 5000 条左右，一条 1500 条左右。

要求夜里同步到另一个库。

现在定时任务和库都连好了。

想问下 5000 条读出来怎么 insert 进去比较好。

1.目前想的第一个 List<Map<String,Object>> （一次读 5000 条会不会卡）
2.分页 200 条 200 条的读 再写。（同步是覆盖操作）
(￣▽￣")

求指教 怎么读数据再插比较好？
么么哒(* ￣ 3 )(ε￣ *)

[Muninn]

看表的宽度了 不宽完全没问题
以前我都是每 5 万条插一次.

不过这种批量的数据转移 为了以后的扩展性 建议不要用 insert

使用 sqlldr

那效率 提升几十一百倍问题不大 瞬间就倒完了

但是难写 java 没接口 只能导出和导入都调用系统工具 中间创建个管道让导出的数据直接通过内存导入
最后说下来 java 啥作用都没起 用 java c perl python shell 写都一样

[xxdd]

@Muninn 刚刚试了 5000 条 16s 没问题。

谢啦!!☆⌒(*＾-゜)v

[WordCount]

kettle 也可以。

[Muninn]

对了 如果两边都是 oracle 的话 完全没必要 etl
用 dblink 就好了...

[bigzhu]

曾经被要求 1 小时内把一张 5 亿数据的表…迁移到另一个 Oracle 数据库的人飘过。
而且还要求是迁移过去就已经建立好索引了哦。

[spance]

不会有比 dblink 更快更好的方法了

[bugsnail]

@bigzhu 当时有搞定吗？

[bigzhu]

@bugsnail 有啊…省级系统割接。不搞定不行。用的物化视图。

[idblife]

这个比较简单，直接用 oracle 游标或者读到内存里再 insert 都不是个事情，话说你试试不就知道了。

[terryhyx]

比较 oracle 的做法应该是 dblink+MV 然后晚上刷新 MV 就好了