Последняя версия Hadoop обеспечивает mapred-site.xml.template
Нужно ли создавать новый mapred-site.xml файл, используя это?
Любая ссылка на документацию или объяснение, связанные с Hadoop 2.2.0, будет оценена по достоинству.
Почему "mapred-site.xml" не включен в последнюю версию Hadoop 2.2.0?
Ответ 1
Я считаю, что это все еще требуется. Для нашей базовой настройки Hadoop 2.2.0 2- node, которую мы работаем, я сделал следующее из документации по настройке.
"
Из базы установки Hadoop отредактируйте файл etc/hadoop/mapred-site.xml. Новый параметр конфигурации для Hadoop 2 - это возможность указать имя фрейма для MapReduce, установив свойство mapreduce.framework.name. В этой установке мы будем использовать значение "пряжи", чтобы сообщить MapReduce, что он будет работать как приложение YARN. Сначала скопируйте файл шаблона в файл mapred-site.xml.
cp mapred-site.xml.template mapred-site.xml
Затем скопируйте следующее в файл Hadoop etc/hadoop/mapred-site.xml и удалите исходные пустые теги.
<configuration>
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
</configuration>
"
В документации, я нашел этот наиболее полезный. Кроме того, конфигурации etc/hosts для настройки кластера и других конфигураций, связанных с кластерами, немного сложно понять.