Invoking stop() from shutdown hook 2023-06-08 20:00:25,905 INFO (AbstractConnector.java:318)- Stopped Spark@4978bcd5{HTTP/1.1,[http/1.1]}{0.0.0.0:4040} 2023-06-08 20:00:25,906 INFO (Logging.scala:54)- Stopped Spark web UI at http://DESKTOP-UN228O4:4040 2023-06-08 20:00:25,919 INFO (Logging.scala:54)- MapOutputTrackerMasterEndpoint stopped! 2023-06-08 20:00:25,929 INFO (Logging.scala:54)- MemoryStore cleared 2023-06-08 20:00:25,929 INFO (Logging.scala:54)- BlockManager stopped 2023-06-08 20:00:25,935 INFO (Logging.scala:54)- BlockManagerMaster stopped 2023-06-08 20:00:25,937 INFO (Logging.scala:54)- OutputCommitCoordinator stopped! 2023-06-08 20:00:25,950 INFO (Logging.scala:54)- Successfully stopped SparkContext 2023-06-08 20:00:25,950 INFO (Logging.scala:54)- Shutdown hook called 2023-06-08 20:00:25,951 INFO (Logging.scala:54)- Deleting directory C:\Users\HUAWEI\AppData\Local\Temp\spark-87e84c73-3cf7-4db0-bf7d-ab42db0a5a54
时间: 2024-03-19 07:41:04 浏览: 10
这段日志是 Spark 服务正常关闭时的输出信息,其中包含了一些停止服务时的操作。具体来说,它首先停止了一个名为 Spark 的 HTTP 服务,然后关闭了 Spark 的 web UI,接着停止了 MapOutputTrackerMasterEndpoint,清空了内存存储器,最后停止了 BlockManager 和 BlockManagerMaster。最后,它成功停止了 SparkContext,并在最后调用了一个 Shutdown hook,最后删除了一个临时目录。
相关问题
Invoking stop() from shutdown hook
这是一个关于 Java 中的 Shutdown Hook 的问题。当 JVM 开始关闭时,会执行注册的 Shutdown Hook。如果在 Shutdown Hook 中调用 stop() 方法,那么意味着强制停止正在运行的线程。这可能会导致一些未定义的行为,因此不建议在 Shutdown Hook 中调用 stop() 方法。通常建议在 Shutdown Hook 中执行一些清理工作,如关闭网络连接、关闭文件句柄等。
Error invoking remote method 'docker-start-container': Error: (HTTP code 500) server error
这个错误提示是在进行 Docker 操作时出现的,具体原因可能是 Docker daemon 出现问题或者 Docker 容器的配置有误。建议检查 Docker daemon 是否正常运行,以及容器的配置是否正确。你可以尝试重启 Docker daemon 或者重新配置容器来解决这个问题。另外,也可以查看 Docker 的日志文件,以便更好地了解问题所在。