当前位置: 首页 > news >正文

配置集群-日志聚集操作

1.修改配置文件

<!-- 开启日志聚集功能 -->

<property>

    <name>yarn.log-aggregation-enable</name>

    <value>true</value>

</property>

<!-- 设置日志聚集服务器地址 -->

<property>  

    <name>yarn.log.server.url</name>  

    <value>http://hadoop101:19888/jobhistory/logs</value>

</property>

<!-- 设置日志保留时间为7天 -->

<property>

    <name>yarn.log-aggregation.retain-seconds</name>

    <value>604800</value>

</property>

2.分发配置文件

xsync /opt/module/hadoop-3.1.3/etc/hadoop

3.重新启动服务

重启yarn

进入到我们安装yarn的主机,通过命令来关闭掉yarn和historyServer,然后再重启

sbin/stop-yarn.sh

mapred --daemon stop historyserver

start-yarn.sh

mapred --daemon start historyserver

4.重新运行

hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.3.jar wordcount /wcinput /output1

查看日志

 

相关文章:

  • Flutter IconButton完全指南:高效使用与性能优化秘籍
  • 只是“更轻更薄”?不!遨游三防平板还选择“更强更韧”
  • 如何基于Gone编写一个Goner对接Apollo配置中心(下)—— 对组件进行单元测试
  • NPN三极管基极接稳压管的作用
  • 基于微信小程序的充电桩管理系统
  • PHP序列化漏洞
  • Typora1.9.5 破解
  • 项目问答(自用记录)
  • 领码科技:在低代码技术浪潮中的分享与探索
  • AI助力临床诊疗:AI工具帮助确认病情
  • 前端 FormData 详解
  • 搭建自己的OCR服务
  • 【微信小程序变通实现DeepSeek支持语音】
  • 路由器安全研究:D-Link DIR-823G v1.02 B05 复现与利用思路
  • 【嵌入式Linux】基于ArmLinux的智能垃圾分类系统项目
  • numpy学习笔记11:计算两个数组的欧氏距离
  • 【Python办公】提取Excel嵌入图片流程(代码前期步骤)
  • Redis 管道(Pipeline)深度解析:原理、场景与实战
  • C++菱形继承问题
  • 【Java】数组
  • 贵州赤水被指“整改复耕”存形式主义,当地部署耕地流出整改“回头看”
  • 过敏性鼻炎,不只是“打喷嚏”那么简单
  • 中国体育报:中国乒协新周期新起点再出发
  • 海南:谈话提醒9名缺点明显或有苗头性、倾向性问题的省管干部
  • 对话地铁读书人|中学教师董女士:借来的书更好看
  • 一场12年的马拉松,他用声音陪伴中国路跑成长