hadoop运行问题:INFO Configuration.deprecation: session.id is deprecated. Instead, use dfs.metrics.sessio...
时间: 2023-12-24 13:05:36 浏览: 681
这是一个关于 Hadoop 的警告信息,意思是 session.id 属性已经被废弃,建议使用 dfs.metrics.session-id 代替。这个警告信息通常出现在启动 Hadoop 集群时的日志中,但并不会影响 Hadoop 的正常运行。
如果你想消除这个警告信息,可以在 Hadoop 的配置文件中找到涉及到 session.id 的配置项,并将其替换为 dfs.metrics.session-id。具体来说,可以在 core-site.xml 中添加以下配置项:
```
<property>
<name>dfs.metrics.session-id</name>
<value>hadoop-metrics2-${user.name}-${hadoop.metrics.datestamp}</value>
</property>
```
这样就可以将 session.id 替换为 dfs.metrics.session-id,避免出现警告信息。
相关问题
INFO Hadoop运行问题:Configuration.deprecation: fs.default.name is deprecated. Instead, use fs.defaul tFS
这是一个关于 Hadoop 的警告信息,意思是 fs.default.name 属性已经被废弃,建议使用 fs.defaultFS 代替。这个警告信息通常出现在启动 Hadoop 集群时的日志中,但并不会影响 Hadoop 的正常运行。
如果你想消除这个警告信息,可以在 Hadoop 的配置文件中找到涉及到 fs.default.name 的配置项,并将其替换为 fs.defaultFS。具体来说,可以在 core-site.xml 中添加以下配置项:
```
<property>
<name>fs.defaultFS</name>
<value>hdfs://your.hadoop.cluster.url:8020</value>
</property>
```
这样就可以将 fs.default.name 替换为 fs.defaultFS,避免出现警告信息。需要注意的是,your.hadoop.cluster.url:8020 需要替换为你自己的 Hadoop 集群的 URL。
Hadoop运行问题:INFO client.DefaultNoHARMFailoverProxyProvider: Connecting to ResourceManager at node 1/10.39.0.124:8032
这是一个关于 Hadoop 的信息,意思是 Hadoop 客户端正在连接 ResourceManager。ResourceManager 是 Hadoop 集群中的一个重要组件,负责协调和管理集群中的资源。当客户端需要提交一个作业(Job)时,需要先连接 ResourceManager 获取集群中的资源信息,然后才能启动作业。
在这个信息中,node 1/10.39.0.124:8032 表示 ResourceManager 的地址。其中,10.39.0.124 是 ResourceManager 所在机器的 IP 地址,8032 是 ResourceManager 监听的端口号。
这个信息通常出现在启动 Hadoop 作业时的日志中,表明作业已经开始执行。如果你遇到了问题,可以检查 ResourceManager 是否正常运行,以及客户端是否能够连接到 ResourceManager。
阅读全文