postgresql - 从 Snowflake 查询 PostgreSQL 数据库

Question

PostgreSQL 提供了一种通过 dblink 查询远程数据库的方法。

类似地(某种程度上)，Exasol 提供了一种通过以下语法连接到远程 Postgres 数据库的方法:

CREATE CONNECTION JDBC_PG
  TO 'jdbc:postgresql://...'
  IDENTIFIED BY '...';

SELECT * FROM (
  IMPORT FROM JDBC AT JDBC_PG
  STATEMENT 'SELECT * FROM MY_POSTGRES_TABLE;'
)

-- one can even write direct joins such as
SELECT
  t.COLUMN,
  r.other_column
FROM MY_EXASOL_TABLE t
LEFT JOIN (
  IMPORT FROM JDBC AT JDBC_PG
  STATEMENT 'SELECT key, other_column FROM MY_POSTGRES_TABLE'
) r ON r.key = t.KEY

这非常方便将数据从 PostgreSQL 直接导入 Exasol，而无需使用临时文件(csv、pg_dump...)。

是否有可能从 Snowflake 实现同样的事情(通过直接实时连接从 Snowflake 查询远程 PostgreSQL 数据库)？我在文档中找不到任何提及。

Answer 1

您是否考虑过使用 external functions ？这并不是您要找的东西(Snowflake 尚不具备该功能)，但在某些用例中可以用作解决方法。例如，您可以在 AWS Lambda 上创建一个 Python 函数来查询 PostgreSQL 以获取少量数据(由于 Lambda 限制)，或者让它触发一个 PostgreSQL 进程，该进程转储到 S3 以触发 Snowpipe 用于批量导入用例。