fkn+antitotal

 protected  void 	cleanup(org.apache.hadoop.mapreduce.Mapper.Context context)
          Called once at the end of the task.

вызывается в конце выполнения задания -
-имеется как в как в распределителе (мэппере) так и в сумматоре (редьюсэре)

Его вполне можно переопределить - дабы задать какие-то свои действия при выходе из задания:

Давайте немного поправим стандартный пример...ммм.. ну например -
давайте выведем только те записи, которые встречаются более 1 раза:

Если ничего не изменяется при модификации кода - Проблема может быть в том, что вы указываете стандартное имя пакета

package org.apache.hadoop.examples;

- что приводит к тому, что запускается уже скомпилированный файл хадупа. а не то, что вы компилируете - поэтому переименуйте пакет, напр. назовите его:

@Override 

— это аннотация к коду на яве - она проверяет, переопределен ли метод. Вызывает предупреждение компиляции, если метод не найден в родительском классе (то есть в том, от которого наследуется данный).

ПРИМЕЧАНИЕ: это конспект доклада для IFF : http://fkn.ktu10.com/?q=node/4191

Итак сегодня мы будем говорить о проблеме построения сервака - точнее о помещении для размещении фермы серверов

Ну например - может просто не хватать разеток -
или же в здании что-то не очень с проводкой

Также сервера сильно греются и шумят.
Если это зима- то это нормально, но летом когда 40-50 градусов - а столько и будет в помещении -всё становится совсем плохо.

Входные файлы: http://fkn.ktu10.com/?q=node/5746

Немного модифицируем стандартный пример:

При выполнении этой команды:

hadoop fs -ls

Ошибка

hadoop ls: `.': No such file or directory

может быть вызвана тем. что для пользователя не создан домашний каталог

hadoop fs -mkdir -p /user/hduser

ну и создадим там например входную директорию:

 hadoop fs -mkdir /user/hduser/myinput

Выполните команду:

passwd username

Введите старый пароль
После чего:

1. введите новый пароль
2. нажмите ВВОД
3. Ещё раз введите новый пароль (подтверждение)
4. Нажмите ВВОД

Переходим в папку установки хадупа ,например:

cd /usr/local/hadoop

для версии 2.2.0 делаем так:

sbin/start-all.sh

фишка в том что файл теперь в sbin а не в bin

Остановка:

sbin/stop-all.sh

вроде так:

hadoop-2.2.0/share/hadoop/mapreduce/sources/hadoop-mapreduce-examples-2.2.0-sources.jar

При этом в корне хадупа указанной версии только 7 папок:

bin
etc
include
lib
libexec
sbin
share

Так что не паникуйте =)) разбирайтесь)