我该如何通过Spark WEB UI监控作业的进度呢?在本地运行Spark时,可以通过端口4040访问Spark UI,使用http://localhost:4040。
在我的Glue作业中,我已经启用了Spark UI,并指定了所有必要的细节(例如与s3相关等),以使Spark UI正常工作。 那么我该如何查看我的Glue作业的DAG/Spark UI呢?