我已在AWS S3存储桶上创建了一个Snowflake外部阶段。另外,我已经设置了一个Snowpipe,当S3存储桶上有文件PUT时,它会执行复制命令。Snowpipe从SNS通知中获得通知。该管道已配置为出现错误时自动中止。 现在,如果从S3复制文件到Snowflake时出现任何错误...例如由于数据不匹配... Snowpipe会简单地中止。是否有一种方式可以在管道失败时通知我? 因为我不知道是否因错误而丢失了任何要复制的文件。
Snowflake目前仅为WAREHOUSE MONITOR提供通知/警报服务,用于监控仓库信用消耗。 监视Snowpipe问题的最佳方法是利用第三方报告/监视工具查询Snowflake视图。 我建议您还应查看以下GitHub项目,这是一个为Snowflake编写的开源监视/警报工具: https://github.com/snowflakedb/SnowAlert