在Amazon Redshift和Amazon RDS之间查询和联接数据

JustWei

当前,我们将为机器学习功能将Redshift和PostgreSQL RDS数据库链接在一起,以便我们的ML服务器可以在单个位置查询和加入数据。

据我所知,有两种解决方案:

  • 选项1:将整个RDS数据转储到Redshift中并每天同步
  • 选项2:创建另一个RDS并用于dblink创建将两个数据库连接在一起的视图

对于选项1,我们可以使用的最佳AWS服务是什么(我们更喜欢使用AWS服务)?

对于选项2,性能如何(我们当前的redshift容量为80GB,postgresql为7GB)。

还有其他解决方案吗?

约翰·罗滕斯坦

Amazon Redshift引入了对联合查询(预览)的支持

预览版Amazon Redshift联合查询功能使您可以查询和分析跨运营数据库,数据仓库和数据湖的数据。借助联合查询,您现在可以将针对Amazon RDS for PostgreSQL和Amazon Aurora PostgreSQL的实时数据的查询与跨Amazon Redshift和Amazon S3环境的查询集成在一起

联合查询使您可以将实时数据合并为商业智能(BI)和报告应用程序的一部分。Redshift中的智能优化器可将计算的一部分直接下推并将其直接分配到远程操作数据库中,以通过减少网络上移动的数据来提高性能。Redshift根据需要通过其自身的大规模并行处理功能来补充查询执行。

本文收集自互联网,转载请注明来源。

如有侵权,请联系[email protected] 删除。

编辑于
0

我来说两句

0条评论
登录后参与评论

相关文章

来自分类Dev

在Amazon Redshift中追加和覆盖

来自分类Dev

亚马逊S3和Amazon Redshift之间的区别

来自分类Dev

使用Amazon Redshift进行本地开发和暂存

来自分类Dev

将数据从Amazon Redshift迁移到Amazon RDS

来自分类Dev

Amazon Redshift:查询执行挂起

来自分类Dev

将数据(增量)加载到Amazon Redshift,S3,DynamoDB和Insert

来自分类Dev

使用Amazon Redshift / PostgreSQL进行渠道查询

来自分类Dev

Amazon Redshift即使在同时属于Dist Key和Sort Key的列上进行联接时也进行哈希联接

来自分类Dev

将数据从MySql同步到Amazon RedShift

来自分类Dev

将数据从MySql同步到Amazon RedShift

来自分类Dev

将数据从Amazon Redshift迁移到DynamoDB

来自分类Dev

从Amazon Redshift导出到RDS MySQL数据库

来自分类Dev

MySQL和Amazon RDS DBA用户

来自分类Dev

Amazon RDS和VPC端点连接

来自分类Dev

Amazon Redshift:在数据库之间复制数据

来自分类Dev

通过PHP查询Amazon Redshift数据库

来自分类Dev

何时使用 Amazon Redshift 频谱通过 AWS Glue ETL 查询 Amazon S3 数据

来自分类Dev

Django,Heroku和Amazon入门

来自分类Dev

VirtoCommerce与eBay和Amazon的集成

来自分类Dev

Amazon Gateway API和JAVA

来自分类Dev

Amazon VPC 子网和 IP

来自分类Dev

Amazon RedShift复制命令

来自分类Dev

Amazon Redshift 等级组

来自分类Dev

Amazon Redshift 术语

来自分类Dev

Amazon Redshift中的长时间查询永远不会返回

来自分类Dev

基于VARCHAR大小的Amazon Redshift查询的性能不佳

来自分类Dev

Amazon Redshift如何获取表插入数据的最后日期

来自分类Dev

Amazon Redshift - 如何提取上个月的数据

来自分类Dev

是否可以升级和/或移动Amazon RDS保留实例?