首页 > 大数据 > Hadoop > impala 数据表在集群间迁移方案
把数据取到本地的目录使用 hadoop fs -get
hdfs://nameservice01/sa/data/2/event/18391/10/.snapshot/20200520_011300-0-1589908380847
本地目录
可以整个目录取,但会有一下没有的临时文件
使用tar cvf data.tar 本地目录 打包
使用scp 复制到新集群, tar xvf 包文件名 解包
hadoop fs -put 上传到dfs 对应目录
在新集群impala-shell 里面用建表脚本建表
使用命令增加分区 ALTER TABLE event_2 ADD PARTITION (day=19291,event_bucket=0) location '/sa/data/2/event/19291/0/20221027_111536-0-1666840536392';
进入impala-shell 进行设置 set PARQUET_FALLBACK_SCHEMA_RESOLUTION=name 才能正常查询
来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/133735/viewspace-2921261/ ,如需转载,请注明出处,否则将追究法律责任。