WARN FileInputDStream: Error finding new files
时间: 2023-07-14 11:11:46 浏览: 156
这个错误通常是由于 Spark Streaming 的输入路径不正确或者没有新的文件被添加到指定的路径中导致的。可以检查以下几个方面:
1. 确认输入路径是否正确,并且有足够的权限访问该路径。
2. 确认新的文件是否已经被添加到输入路径中。
3. 如果使用的是 HDFS,可以检查是否有足够的权限在 HDFS 中创建新文件。
如果以上步骤都没有解决问题,可以尝试重新启动 Spark Streaming 作业,或者检查 Spark Streaming 的日志文件,查看更详细的错误信息。
阅读全文