Hadoop 学习 有关问题总结
Hadoop 学习 问题总结
1 出现 Name node is in safe mode.(hdfs 安全模式)
执行语句hadoop dfsadmin -safemode leave 解除安全模式
2 执行方法时出现了异常如:
java.lang.OutOfMemoryError: Java heap space
at org.apache.hadoop.mapred.MapTask$MapOutputBuffer.<init>(MapTask.java:781)
at org.apache.hadoop.mapred.MapTask$NewOutputCollector.<init>(MapTask.java:524)
at org.apache.hadoop.mapred.MapTask.runNewMapper(MapTask.java:613)
at org.apache.hadoop.mapred.MapTask.run(MapTask.java:305)
at org.apache.hadoop.mapred.LocalJobRunner$Job.run(LocalJobRunner.java:177)
可能是方法出错,但大多数是eclipse的jvm没有调整。
调整方法:window---preferences--Java--Installed JREs 在default VM Argument 中加入-Xmx256M
1 出现 Name node is in safe mode.(hdfs 安全模式)
执行语句hadoop dfsadmin -safemode leave 解除安全模式
2 执行方法时出现了异常如:
java.lang.OutOfMemoryError: Java heap space
at org.apache.hadoop.mapred.MapTask$MapOutputBuffer.<init>(MapTask.java:781)
at org.apache.hadoop.mapred.MapTask$NewOutputCollector.<init>(MapTask.java:524)
at org.apache.hadoop.mapred.MapTask.runNewMapper(MapTask.java:613)
at org.apache.hadoop.mapred.MapTask.run(MapTask.java:305)
at org.apache.hadoop.mapred.LocalJobRunner$Job.run(LocalJobRunner.java:177)
可能是方法出错,但大多数是eclipse的jvm没有调整。
调整方法:window---preferences--Java--Installed JREs 在default VM Argument 中加入-Xmx256M