记忆角落

  • {{ item.name }}
  • HBASE导出数据到本地服务器
  • 1.连接hbase
  • 2.查看Hbase中的表
  • 3.获取hbase表的数据
  • 4.将Hbase数据导出到HDFS
  • 5.查看HDFS中的是否成功导出数据
  • 6.将HDFS中的数据导出到本地(合并导出)
  • 首页
  • 关于
  • 归档
  • 邻居
  • 捐赠

从HBASE导出数据到本地服务器

  • 郭良俊只狗
  • 2020-08-28
  • 7

HBASE导出数据到本地服务器

1.连接hbase

hbase shell

2.查看Hbase中的表

list

3.获取hbase表的数据

扫描1条数据

scan 'PM_NR_SA_NRCELLDU_HOUR',{LIMIT=>1}

范围查询

scan 'PM_NR_SA_NRCELLDU_HOUR',{LIMIT=>1,STARTROW=>'190601'}

scan 'PM_NR_SA_NRCELLDU_HOUR', {STARTROW => '190601', ENDROW => '190602'}

参考:https://www.cnblogs.com/hello-wei/p/10314435.html

4.将Hbase数据导出到HDFS
hbase org.apache.hadoop.hbase.mapreduce.Export -D hbase.mapreduce.scan.row.start=190701_s00001nks_101179-135 -D hbase.mapreduce.scan.row.stop=190702_s00001nks_101122-129  v2.mdt.grid.date_gh_cgi /user/hdfs/data1/output/glj
5.查看HDFS中的是否成功导出数据

hadoop fs -ls /user/hdfs/data1/output/glj

6.将HDFS中的数据导出到本地(合并导出)

hadoop fs -getmerge /user/hdfs/data1/output/glj/ /data1/output/glj_test.csv

getmerge命令使用:https://199604.com/981

© 2012 - 2023 记忆角落 网站统计
Theme by Wing
粤ICP备14056850号-1 又拍云CDN赞助