代码之家 › 专栏 › 技术社区 › JChao

将数据从redshift直接复制到EMR集群-这是一个好的做法吗?

amazon-emr amazon-redshift

0

JChao · 技术社区 · 7 年前

Amazon提供了一个非常详细的文档,用于将数据从EMR复制到Redshift(通过S3),但是似乎没有其他文档,这让我怀疑将数据从Redshift加载到EMR是否是一个好的实践(直接加载,或者通过某种媒介)

理论上我不明白为什么不,但我不知道它的后果

0 回复 | 直到 7 年前

1

0

Euijun Jeong 6 年前

我想你可以用红移卸载。将数据导出为Parquet,然后从EMR Hadoop(Spark,Hive)读取数据

UNLOAD ('select-statement')
TO 's3://object-path/name-prefix'
authorization
FORMAT PARQUET