Hadoop: различия между версиями

Версия от 16:44, 8 ноября 2010

Данная страница находится в разработке.
Эта страница ещё не закончена. Информация, представленная здесь, может оказаться неполной или неверной.

Что это такое?

Wikipedia: Apache Hadoop является свободным Java фреймворком, поддерживающим выполнение распределённых приложений, работающих на больших кластерах, построенных на обычном оборудовании. Hadoop прозрачно предоставляет приложениям надёжность и быстродействие операций с данными.

Как установить Hadoop на ALT Linux

Данная инструкция описывает ALT-специфику установки Hadoop-кластера из двух машин. Пусть в нашем кластере есть две машины - hadoopt1 и hadoopt2. DNS-резолвинг работает.

Устанавливаем rpm-ки hadoop-* из ftp://ftp.altlinux.org/pub/people/vitty/hadoop/
Редактируем /etc/hadoop/masters, где пишем кто у нас будет master-нодой

cat /etc/hadoop/masters
hadoopt1

Редактируем /etc/hadoop/slaves, где перечисляем все slave-ноды:

cat /etc/hadoop/slaves
hadoopt1
hadoopt2

Как пользоваться Hadoop

@@ Строка 7: / Строка 7: @@
 == Как установить Hadoop на ALT Linux ==
 Данная инструкция описывает ALT-специфику установки Hadoop-кластера из двух машин.
-Пусть в нашем кластере есть две машины - '''hadoopt1''' и '''hadoopt2'''
+Пусть в нашем кластере есть две машины - '''hadoopt1''' и '''hadoopt2'''. DNS-резолвинг работает.
 #Устанавливаем rpm-ки hadoop-* из [ftp://ftp.altlinux.org/pub/people/vitty/hadoop/ ftp://ftp.altlinux.org/pub/people/vitty/hadoop/]
-#
+#Редактируем /etc/hadoop/masters, где пишем кто у нас будет master-нодой
+ cat /etc/hadoop/masters
+ hadoopt1
+#Редактируем /etc/hadoop/slaves, где перечисляем все slave-ноды:
+ cat /etc/hadoop/slaves
+ hadoopt1
+ hadoopt2
 == Как пользоваться Hadoop ==