python-3.x - 使用 Spark-Submit 运行烧瓶应用程序

Question

我正在使用需要一些 Spark 上下文的 Flask 构建 API。这是使用Spark-Submit for Long run而不是 python 命令运行 Flask 应用程序的好方法吗？

标签： python-3.xflaskpyspark

Answer 1

您可以使用Celery：链接到文档

这是在 Web 应用程序中调用 Spark 上的异步作业的示例帖子。查看Spark+Celery 博客