pyspark - SnappyData 可以从 s3 加载并保存到 s3 中吗？

Question

我最近找到了 SnappyData 的网站。我对 SparkSQL 查询性能很感兴趣。有没有人尝试使用 SnappyData 加载 s3 并保存 s3 操作？我找不到这样的文件。

我想使用 pyspark，并指定 'com.databricks.spark.csv' 格式和各种选项。

标签： pysparkpyspark-sqlsnappydata

Answer 1

是的你可以。这是一个例子。