启动flume时报错Info: Including Hadoop libraries found via (/opt/software/hadoop-2.8.3/bin/hadoop) for HDFS access Info: Including Hive libraries found via () for Hive access + exec /opt/jdk1.8.0_261/bin/java -Xmx20m -cp '/opt/software/flume-1.8.0/conf:/opt/software/flume-1.8.0/lib/*:/opt/software/hadoop-2.8.3/etc/hadoop:/opt/software/hadoop-2.8.3/share/hadoop/common/lib/*:/opt/software/hadoop-2.8.3/share/hadoop/common/*:/opt/software/hadoop-2.8.3/share/hadoop/hdfs:/opt/software/hadoop-2.8.3/share/hadoop/hdfs/lib/*:/opt/software/hadoop-2.8.3/share/hadoop/hdfs/*:/opt/software/hadoop-2.8.3/share/hadoop/yarn/lib/*:/opt/software/hadoop-2.8.3/share/hadoop/yarn/*:/opt/software/hadoop-2.8.3/share/hadoop/mapreduce/lib/*:/opt/software/hadoop-2.8.3/share/hadoop/mapreduce/*:/contrib/capacity-scheduler/*.jar:/lib/*' -Djava.library.path=:/opt/software/hadoop-2.8.3/lib/native org.apache.flume.node.Application --conf-file /opt/software/flume-1.8.0/conf/hdfs.conf --name agent1 Dflume.root.logger=DEBUG,console SLF4J: Class path contains multiple SLF4J bindings. SLF4J: Found binding in [jar:file:/opt/software/flume-1.8.0/lib/slf4j-log4j12-1.6.1.jar!/org/slf4j/impl/StaticLoggerBinder.class] SLF4J: Found binding in [jar:file:/opt/software/hadoop-2.8.3/share/hadoop/common/lib/slf4j-log4j12-1.7.10.jar!/org/slf4j/impl/StaticLoggerBinder.class] SLF4J: See http://www.slf4j.org/codes.html#multiple_bindings for an explanation.是什么原因
时间: 2023-07-12 12:03:58 浏览: 608
hadoop新手入门资料
这个错误提示说了两个问题:
1. 发现了多个 SLF4J 日志绑定。这通常发生在在一个应用程序中包含多个不同版本的 SLF4J 库时。这可能会导致日志记录错误或日志重复。可以通过删除其中一个或将其排除来解决此问题。
2. 找不到 Hive 库。这很可能是因为您没有正确设置 Hive 的类路径。您需要在 flume 的 classpath 中包含 Hive 相关的库。可以尝试设置 HIVE_HOME 环境变量并将 $HIVE_HOME/lib 添加到 flume 的 classpath 中,或者手动添加 Hive 相关的 jar 包到 flume 的 classpath 中。
要解决这些问题,您可以尝试以下步骤:
1. 检查 flume 和 Hadoop 版本是否兼容。如果不兼容,可能会导致类路径问题和其他错误。建议使用 Hadoop 2.x 版本与 flume 1.x 版本搭配使用。
2. 检查 flume 的 classpath 是否正确设置。确保 flume 的 classpath 包含 Hive 相关的库。
3. 检查 SLF4J 日志绑定问题。如果存在多个 SLF4J 日志绑定,可以删除其中一个或将其排除。
希望这些信息可以帮助您解决问题。
阅读全文