apache-spark - 当我在服务器上运行实例时，我可以在本地浏览器中获得用于 spark 的 Web UI 吗？
问题描述
所以我在一个地方工作，我有一台笔记本电脑，每天我使用 shell 连接到远程服务器，并在服务器上做所有事情（运行 jupyter notebook，使用 pyspark 进行 spark 作业）。
我想记录我在运行 Spark 作业时使用的所有服务器资源（内存、cpu 使用情况等）。我虽然可以做到这一点的一种方法是查看 Web UI，但我无法连接到 Web UI。
我使用 sc._conf.getAll() 获得了我的驱动程序 ip、端口和所有内容的所有属性但无法连接。
解决方案
推荐阅读
- python - 如何在新窗口中获取事件以使用 tkinter Python 正常运行？
- python - 为什么 saved_model_cli 有效而加载 saved_model.pb 无效？
- delphi - 打开已包含字段的 TFDQuery
- php - $_FILES[image][name]; 的替代方法是什么？
- python - 如何在 JSON 中进行数字对齐？
- reactjs - 使用高阶组件 React TypeScript 提升静态
- flask - 谷歌云函数 HTTP 触发器
- laravel - Laravel CRUD 应用 Dusk vs PHPUnit
- pandas - 熊猫设置列防止将单个单元格设置为可迭代
- python - 针对大量虚拟机的 Ovirt 关闭解决方案