内容纲要
概要描述
本文介绍一下通过 inceptor-server 异常停止的有关优化。
详细说明
1、查看inceptor-server日志:
2、查看spark-application日志:
3、查看hdfs相关日志:
可参考:https://issues.apache.org/jira/browse/HDFS-4406
4、优化方案
1、该异常为一个bug,需更换jar包,然后重启全部大数据服务)
2、需要更新的jar包位置(每个节点都需要,更换时记得先备份老的jar包):
/usr/lib/hadoop/hadoop-common-2.5.2-transwarp-tdh436.jar
/usr/lib/hadoop-hdfs/hadoop-hdfs-2.5.2-transwarp-tdh436.jar
3、新的jar包MD5如下:
520170d688cb17e46575966f52a3ff4f hadoop-common-2.5.2-transwarp-tdh436.jar
0f1f8e3c577761302933153ebc9a1b6e hadoop-hdfs-2.5.2-transwarp-tdh436.jar
ps:该包基于现场jar包:
3331ee36332e975fec5483ae0558938a hadoop-common-2.5.2-transwarp-tdh436.jar
64c767e644e10d7a4e370f3c84eb1aba hadoop-hdfs-2.5.2-transwarp-tdh436.jar