apache-kafka - Spark3-submit 继续运行而不返回任何错误或结果
问题描述
我试图使用 spark3 和 python 运行一个简单的数据流。按照此指南链接,该命令不会返回任何错误或结果。但我不确定在哪里可以看到日志,或者我的 spark3 是否正在流式传输。
我用于终端 1 的命令:
[root@centos7 ~]# nc -lk 9999
test
test2
test3
hello
终端 2 中的命令:
bin/spark3-submit PATH/spark3/examples/src/main/python/streaming/network_wordcount.py IP-Address 9999
终端 2 上的结果:
同样的结果不断循环。但我在控制台中看不到任何错误或任何成功结果。
Spark UI 中的结果:
解决方案
推荐阅读
- python - 从文本中提取哪种特征用于作者识别分类好
- reactjs - 如何在反应中访问共享组件中的材料主题?
- java - 原因:java.lang.ClassNotFoundException:在 Firebase 电话身份验证中找不到类
- c - C - 光标位置影响程序
- parallel-processing - sbatch 脚本的 CPU 数量与内核中 CPU 的总数不同?
- c# - 为每个数据库行创建不同的 xml 文件
- selenium - 为什么 xpath 的文本功能不显示任何关于scrapy selenium 的数据?
- idris - Idris 中接口实例的接口约束
- python-3.x - 如何在新图像上测试复杂的 CNN 模型?
- ansible - 发生故障时是否可以在ansible中显示呼叫跟踪?