Вопросы Теги

Установка Hadoop на нескольких экземплярах Ubuntu 10.04.1, работающей на VMware Workstation

Ответ Zanchey является лучшим, я знаю для обнаружения то, что ожидает IO.

Когда Вы говорите, что Ваш сервер является объектом высокой загрузки, что Вы подразумеваете под этим? Что-то в особенности не спешит отвечать?

Если Вы задаетесь вопросом, является ли Ваш Диск IO узким местом, я использовал бы команду iostat (часть sysstat пакета), чтобы видеть, находится ли диск на самом деле под большой нагрузкой.

Пример:

[kbrandt@kbrandt-opadmin: ~] iostat -x 1 3                                                                                           

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           2.38   34.71    2.64    1.18    0.00   59.21 
Device:         rrqm/s   wrqm/s     r/s     w/s   rsec/s   wsec/s avgrq-sz avgqu-sz   await  svctm  %util
sda               0.11    17.35    2.21   20.31    46.57   301.40    15.45     2.27  100.66   1.48   3.34
sda1              0.10    17.31    2.21   20.31    46.48   301.10    15.44     2.27  100.66   1.48   3.34
sda2              0.00     0.00    0.00    0.00     0.00     0.00     3.50     0.00   30.00  30.00   0.00
sr0               0.00     0.00    0.00    0.00     0.00     0.00    18.44     0.00  677.67 512.61   0.00

avg-cpu:  %user   %nice %system %iowait  %steal   %idle
           6.22    0.00    4.31    0.00    0.00   89.47   
Device:         rrqm/s   wrqm/s     r/s     w/s   rsec/s   wsec/s avgrq-sz avgqu-sz   await  svctm  %util
sda               0.00     0.00    0.00    0.00     0.00     0.00     0.00     0.00    0.00   0.00   0.00
sda1              0.00     0.00    0.00    0.00     0.00     0.00     0.00     0.00    0.00   0.00   0.00
sda2              0.00     0.00    0.00    0.00     0.00     0.00     0.00     0.00    0.00   0.00   0.00
sr0               0.00     0.00    0.00    0.00     0.00     0.00     0.00     0.00    0.00   0.00   0.00
1
задан 9 February 2017 в 00:33
1 ответ

Конечно, это возможно. То, как Вы протестировали бы его, абсолютно зависит от того, как Вы - планирование использования Hadoop. Независимо от того, как Вы используете его, имеете в виду, что производительность в Вашей тестовой среде будет намного более плохой чем тогда, когда узлы Hadoop работают на своих собственных аппаратных средствах.

1
ответ дан 4 December 2019 в 01:58
  • 1
    Привет Eric, но как я делаю это??? –  learner 24 August 2010 в 23:02
  • 2
    я дам версию ореховой скорлупы. Для получения дополнительной информации консультируйтесь с документацией для Ubuntu/hadoop/vmware рабочей станции/и т.д. 1. Устанавливаете VM Ubuntu. 2. Устанавливаете Hadoop на этом VM. 3. Клонируете это VM X раз. –  EEAA 24 August 2010 в 23:10

Теги

Похожие вопросы