apache-spark - 如何清除 Zeppelin 机器的输入?
问题描述
我想清除 zeppelin 实例中的输入内存。
我正在运行一个从 S3 获取数据并运行一些转换的命令。
不知何故,根据 Spark 中的 executors 选项卡的输入高达 1.4TB。
它列在“执行者”页面的“总输入”下
我试图清除我的缓存以将其降至零,但它不会让步
我正在运行 spark 2.x 并尝试spark.catalog.clearCache()
过sqlContext.clearCache()
如何清除输入内存?
解决方案
推荐阅读
- jquery - 使用 jquery 与兄弟姐妹一起显示数据时出现问题
- r - 根据每行的列间隔分配值的有效方法
- python - 尝试将大量数据从 BigQuery 传输到 MongoDB
- eclipse - 我可以更改 Eclipse 进度条的进度条样式(如条纹)吗?
- c# - 如何在c#中减去路径的最后一个元素?[解决了]
- php - 每个钩子有条件地要求 M2O 入口
- html - 样式下拉 a11y 和没有 js?
- javascript - 如何在 Wordpress 插件中组合 2 个 javascript/jquery 函数
- mysql - 如何按日期分组(如果为空则选择 0)MYSQL
- typescript - 泛型数组上的映射推断出错误的类型