全部博文
-
编辑 删除
hadoop集群运行过程中报“java heap space”问题
由于公司提供的hadoop集群配置过低，近来在运行mr过程中出现java heap space问题，经网上查看，测试验证可以通过下述途径进行解决。 1）修改conf/hadoop-env.sh中的export HADOOP_HEAPSIZE参数，默认为1000，可根据实际namenode和datanode的配置进行增大。 2）在mapred-site.xml中加入配置内容： mapred.child.java.opts &n
