Hadoop
Материал из ALT Linux Wiki
(Различия между версиями)
Vitty (обсуждение | вклад) (Новая страница: «Категория:Admin {{stub}} == Что это такое? == [http://ru.wikipedia.org/wiki/Hadoop Wikipedia:] Apache Hadoop является свободн...») |
Vitty (обсуждение | вклад) (→Как установить Hadoop на ALT Linux) |
||
Строка 7: | Строка 7: | ||
== Как установить Hadoop на ALT Linux == | == Как установить Hadoop на ALT Linux == | ||
Данная инструкция описывает ALT-специфику установки Hadoop-кластера из двух машин. | Данная инструкция описывает ALT-специфику установки Hadoop-кластера из двух машин. | ||
- | Пусть в нашем кластере есть две машины - '''hadoopt1''' и '''hadoopt2''' | + | Пусть в нашем кластере есть две машины - '''hadoopt1''' и '''hadoopt2'''. DNS-резолвинг работает. |
#Устанавливаем rpm-ки hadoop-* из [ftp://ftp.altlinux.org/pub/people/vitty/hadoop/ ftp://ftp.altlinux.org/pub/people/vitty/hadoop/] | #Устанавливаем rpm-ки hadoop-* из [ftp://ftp.altlinux.org/pub/people/vitty/hadoop/ ftp://ftp.altlinux.org/pub/people/vitty/hadoop/] | ||
- | # | + | #Редактируем /etc/hadoop/masters, где пишем кто у нас будет master-нодой |
- | + | cat /etc/hadoop/masters | |
- | + | hadoopt1 | |
+ | #Редактируем /etc/hadoop/slaves, где перечисляем все slave-ноды: | ||
+ | cat /etc/hadoop/slaves | ||
+ | hadoopt1 | ||
+ | hadoopt2 | ||
== Как пользоваться Hadoop == | == Как пользоваться Hadoop == |
Версия 16:44, 8 ноября 2010
Что это такое?
Wikipedia: Apache Hadoop является свободным Java фреймворком, поддерживающим выполнение распределённых приложений, работающих на больших кластерах, построенных на обычном оборудовании. Hadoop прозрачно предоставляет приложениям надёжность и быстродействие операций с данными.
Как установить Hadoop на ALT Linux
Данная инструкция описывает ALT-специфику установки Hadoop-кластера из двух машин. Пусть в нашем кластере есть две машины - hadoopt1 и hadoopt2. DNS-резолвинг работает.
- Устанавливаем rpm-ки hadoop-* из ftp://ftp.altlinux.org/pub/people/vitty/hadoop/
- Редактируем /etc/hadoop/masters, где пишем кто у нас будет master-нодой
cat /etc/hadoop/masters hadoopt1
- Редактируем /etc/hadoop/slaves, где перечисляем все slave-ноды:
cat /etc/hadoop/slaves hadoopt1 hadoopt2