hbase 如何导出部分数据?

2018-05-16 14:11:11 +08:00
 anonymoustian

hbase 里面有大量的数据,几 T 的那种,想导出部分的数据给其他系统测试接口用,有什么好的方法吗?

3290 次点击
所在节点    Hadoop
3 条回复
monkeylyf
2018-05-16 15:00:19 +08:00
直接读 hfile ?
问题描述的不是很清楚,再具体点:准备导出多大数据,数据的 rowkey 的分布大概是什么样的,导出时间要求多长。如果是一次性导出那就随便写个都行啊。
anonymoustian
2018-05-16 15:50:34 +08:00
@monkeylyf 就想像 sql 一样,limit 100~200 的这种。rowkey 就是随机分
monkeylyf
2018-05-16 16:13:19 +08:00
@anonymoustian hbase batch get 目测满足你的需求。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/455280

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX