snowflake-cloud-data-platform - 本地 CSV 文件加载到雪花表
问题描述
如何在不使用任何调度程序的情况下每天将 csv 文件加载到内部阶段的任务...源是本地文件路径,目标是雪花表
解决方案
您是否使用 auto_ingest 探索过 Snowpipe?
您设置了一个通知服务,在 AWS 上,这是 SQS 和 SNS 的组合,它调用 Snowpipe 来摄取新文件。
https://docs.snowflake.com/en/user-guide/data-load-snowpipe-auto-s3.html
Azure 会有类似的东西
推荐阅读
- sql - 在while循环中左连接表并动态命名再次用于左连接的新表
- lotus-domino - 我无法让辅助代理在 WebQueryOpen 事件上运行
- python - 在不安装 Python 的情况下运行 Python 脚本
- python - 尝试从类的所有实例访问布尔变量
- r - 在 ggplot2 中指定特定形状
- c# - 基于 TextBoxes 和 CheckBoxes MVVM 过滤 WPF DataGrid
- javascript - 使用对象工厂时如何实现原型继承?
- json - 我们如何在 elm 中将 dict 转换为 JSON?或者有什么方法可以像我们在 JS 中那样对字典进行字符串化?
- python - 无法在 Python 中导入 OpenCv 模块
- google-cloud-pubsub - 谷歌堆栈驱动程序中未确认的消息警报创建