找小伙伴一起写个棒棒的 Python 数据迁移工具

2018-01-11 11:41:31 +08:00
 jfry
我的目标是写一个尽量全面,易用和高性能的数据迁移工具,目前只是基本可以用的状态(代码就 1000 行)。对这个项目感兴趣,想要提高自己 python 功底,加深对数据库的理解的朋友快来呀~ https://github.com/toaco/carry

目前需要做的
- 并发,缓存,压缩, 数据库本身的 LOAD 和 EXPORT 功能
- 功能完善
- 测试
4767 次点击
所在节点    Python
31 条回复
kevindu
2018-01-11 11:52:59 +08:00
Python2.7 吗?
jfry
2018-01-11 12:02:12 +08:00
@kevindu 目前是 2.7,如果要用 3 的话我可以改
loading
2018-01-11 12:25:54 +08:00
看看阿里的 datax,然后在再考虑自己写。
slgz
2018-01-11 13:38:16 +08:00
只有 python web 能加入吗
jfry
2018-01-11 13:40:32 +08:00
@slgz 肯定可以呀,做 web 的都会数据库~
slgz
2018-01-11 13:45:31 +08:00
@jfry 这咋讨论微信吗?
lengyihan
2018-01-11 13:48:46 +08:00
这个数据迁移是做数据库迁移还是硬盘所有类型数据迁移啊?
laycher
2018-01-11 13:49:09 +08:00
近期倒是有想法把 xls 类的文件数据导入到数据库中。用 python3
jfry
2018-01-11 13:50:37 +08:00
@slgz 微信,jfry898996
jfry
2018-01-11 13:52:28 +08:00
@lengyihan @laycher 目前支持 csv 和数据库,目标是尽量支持多种类型的数据源,比如 excel 等
est
2018-01-11 13:54:46 +08:00
@loading wow。这目录结构整齐划一的 reader, writer, reader, writer, reader, writer, reader, writer, reader, writer

https://github.com/alibaba/DataX

不多说了赶紧 star。
janxin
2018-01-11 14:06:24 +08:00
@est 很好,这很 Java
dudu2017
2018-01-11 14:27:35 +08:00
什么水平都可以参与吗?😬非计算机专业趁寒假在家自学的可以参与吗?
gzas1989
2018-01-11 14:37:00 +08:00
有钉钉群么
jfry
2018-01-11 14:37:28 +08:00
@dudu2017 嗯,都可以的。但是如果你是为了做 web,爬虫什么而学 python 的话最好去做相关的项目。
jfry
2018-01-11 14:52:39 +08:00
@gzas1989 没有,只有 WX
douglas1997
2018-01-11 15:07:46 +08:00
@jfry 可以试试 Slack
dudu2017
2018-01-11 15:44:05 +08:00
@jfry 嗯,好的。那我暂时不参与了
xuzequn
2018-01-11 16:47:18 +08:00
举手🙋
jfry
2018-01-11 17:07:58 +08:00
@xuzequn 欢迎~

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/421953

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX