Что-то горит в серверной; как я могу быстро определить, каково это?

Можно также попробовать их приложение: VIC и КРЫСА, многоадресное приложение раньше было, разрабатывают для MBONE, доступного для Windows XP и UNIX. Это также поддерживает Многоадресная передача IPv6 и IPv4. Вы видите их по http://mediatools.cs.ucl.ac.uk/nets/mmedia/

454
задан 4 April 2013 в 22:47
7 ответов

По общему мнению, ответ на ваш вопрос состоит из двух частей:

Как мы обнаруживаем источник странного запаха гари?

У вас есть «Как» довольно хорошо зафиксировано:

  • «Тест на запах»
  • Ищите видимый дым / дымку
  • Пройдите по комнате с тепловизионной (ИК) камерой, чтобы найти горячие точки
  • Проверьте панели мониторинга и устройства для предупреждений

Вы можете повысить свои шансы на быстрое обнаружение проблемы несколькими способами - улучшенный мониторинг часто оказывается самым простым. Некоторые вопросы, которые нужно задать:

  • Получаете ли вы от оборудования температуру и другие предупреждения о состоянии здоровья?
  • Сообщают ли ваши системы ИБП о неисправностях вашей системе мониторинга?
  • Получаете ли вы аварийные сигналы о потребляемом токе от вашего оборудования распределения электроэнергии?
  • датчики дыма в помещении сообщают системе мониторинга? (и могут? )

Когда нам следует устранять неполадки, а не нажимать на Большой красный переключатель?

Это более интересный вопрос.
Нажатие на большой красный выключатель может стоить вашей компании огромных денег в спешке: выпуск чистых агентов может исчисляться десятками тысяч долларов, а затраты на простой / восстановление после аварийного отключения питания (EPO, «выпадение комнаты») ) может иметь разрушительные последствия.
Вы не хотите уронить центр обработки данных, потому что конденсатор в источнике питания выскочил и вызвал запах в комнате.

И наоборот, пожар в серверной может стоить вашей компании ее данных / оборудования и, что более важно, жизни вашего персонала.

1248] Устранение «странного запаха гари» никогда не должно иметь приоритет над безопасностью , поэтому важно иметь некоторые четкие правила по устранению неполадок в условиях «перед возгоранием».

Следующие рекомендации являются моими личными ограничениями , которые я применяю в отсутствие (или в дополнение к) любой другой четко определенной процедуры / правил - они сослужили мне хорошую службу и могут помочь вам, но они могут так же легко убить или уволить меня завтра, поэтому подайте заявку их на свой страх и риск.

  1. Если вы видите дым или огонь, опускайте комнату
    Это должно быть само собой разумеющимся, но позвольте 'В любом случае скажите это: если есть активный пожар (или дым, указывающий на то, что он скоро будет), вы покидаете комнату, отключаете электричество и разряжаете систему пожаротушения.
    Могут существовать исключения (проявите некоторый здравый смысл), но это почти всегда правильное действие.

  2. Если вы приступаете к устранению неполадок, всегда привлекайте как минимум еще одного человека.
    Это происходит по двум причинам. Во-первых, вы не хотите бродить по центру обработки данных, и вдруг в ряду, по которому вы идете, поднимается стойка, и никто не знает, что вы там находитесь. Во-вторых, другой человек - это ваша проверка на вменяемость при устранении неполадок, а не о выходе из комнаты, и если вы сделаете вызов, чтобы нажать Большой красный переключатель, у вас есть преимущество, если второй человек согласится с решением (помогает избежать аспектов, ограничивающих карьеру такого решения, если позже кто-то его спросит). Оставить кого-нибудь на месте у аварийного аварийного выхода / пожаротушения.
    Носите с собой огнетушитель (пожалуйста, галон или другое чистящее средство).
    Помните правило №1 выше.
    В случае сомнений ​​выйдите из комнаты . Позаботьтесь о своем дыхании: используйте респиратор или кислородную маску. Это может спасти ваше здоровье в случае химического возгорания.

  3. Установите предел и придерживайтесь его
    Точнее установите два предела:

    • Условие («Насколько хуже будет Я позволю этому случиться? ») И
    • Время (« Как долго я буду продолжать попытки найти проблему, пока она не станет слишком рискованной? »).

    Установленные вами пределы также могут быть использованы для разрешения вашей команда начинает упорядоченное отключение пораженной области, поэтому, когда вы DO потребляете питание, вы не разбиваете кучу активных машин, и ваше время восстановления будет намного короче, но помните, что если правильное отключение слишком долго, возможно, вам придется позволить нескольким системам дать сбой во имя безопасности.

  4. Доверяйте своей интуиции
    Если вы беспокоитесь о безопасности в любое время, Вы можете или не можете покинуть комнату, основываясь на интуиции, но перегруппироваться за пределами комнаты в (относительной) безопасности разумно.

Если нет неминуемой опасности, вы можете вызвать местную пожарную часть, прежде чем принимать какие-либо радикальные меры. такие действия, как выпуск EPO или чистого агента. (Они могут сказать вам сделать это в любом случае: их задача - защищать людей, а затем собственность, но они, очевидно, являются экспертами в борьбе с пожарами, поэтому вы должны делать то, что они говорят!)

Мы рассмотрели это в комментариях , но это также может быть обобщено в ответе - @DeerHunter, @Chris, @Sirex и многие другие внесли свой вклад в обсуждение

383
ответ дан 28 November 2019 в 19:13

Это одна из тех ситуаций, когда

XKCD Die Hard sysadmin

не применяется, вам следует позвонить профессионалу

Firefighter in protective gear

Все остальное просто глупо.

43
ответ дан 28 November 2019 в 19:13

Тепловизионная камера могла бы сделать эту работу и позволить вам определить, где находится перегрев. Подобное устройство позволит вам также определить источник пожара или горения в задымленном помещении.

183
ответ дан 28 November 2019 в 19:13

Если у вас был надлежащий мониторинг ИБП (обычно через SNMP), то само устройство должно было звонить в вашу систему мониторинга. Если этого не произошло, поговорите об этом со своим поставщиком. Либо произошел сбой, либо ваша система мониторинга неправильно настроена.

Если что-то действительно горит, оно должно каким-то образом жаловаться на это или просто отключено от сети, что также должно вызывать тревогу.

Если это что-то вроде того, что настоящая шина электропитания прожигает изоляцию, и этого нет в умном блоке распределения питания, тогда мы возвращаемся к вашему первоначальному вопросу: «Как мне найти горящую вещь?» И я думаю, что правильный ответ: «Ударьте EPO и выясните это. Вероятно, ваши производственные серверы недостаточно важны, чтобы рисковать жизнями»

76
ответ дан 28 November 2019 в 19:13

Вы не делаете ничего из того , что было сказано. Вы покидаете опасную среду, потому что все, что проходит через всю комнату, опасно для вашего здоровья и может действительно испортить ваши легкие. Если в комнате чувствуется резкий запах гари, которого вы не можете найти, позвоните (911 | 112 | 999 | любой номер службы экстренной помощи, соответствующий вашей юрисдикции) и позвольте пожарной (компания | отдел | бригада) разобраться с этим, пока они Находимся на воздухе в бутылках.

Компоненты компьютеров содержат всевозможные интересные химические вещества, включая ртуть , кадмий , свинец и множество пластмасс в корпусах. Обратите внимание, что все ссылки, которые я сделал, объясняют, как воздействие низкого уровня может вызвать длительный ущерб или даже быструю смерть. Это среда, которая может быть немедленно опасной для жизни и здоровья .

... так что на самом деле, если что-то горит, не тратьте часы, нюхая дым. Если вы не можете идентифицировать его и немедленно действовать, чтобы сдержать его, уходите.

138
ответ дан 28 November 2019 в 19:13

Мне нравятся ответы на ИК-изображения или термометры, но, возможно, также поможет настоящий «детектор запаха». В конце концов, вас насторожил запах. Дым, тепло, инфракрасное излучение и т. Д. - все это суррогаты.

Примерно так: from Shinyei . Я лично никогда не использовал их и даже не видел, чтобы они использовались в центре обработки данных. Но по крайней мере теоретически это должен быть изящный инструмент. Если у вас есть деньги, чтобы потратить на эту штуковину то есть.

http://www.sca-shinyei.com/odormeter или http://www.intopsys.com/products/cyranose.html?gclid=CNXXzOrLs7YCFUws6wodViYApQ

Он дает вам силу запаха, а также классификацию. Так что поиск запаха должен быть возможен. Дьявол, конечно, в деталях. Насколько он чувствителен, маскирует ложный фоновый запах и т. Д.

Одно из преимуществ перед чисто температурными измерениями состоит в том, что запах часто возникает на гораздо более ранней точке или пороге. Или, если перегретый компонент скрыт телом / скрытой проводкой и т. Д., Легче обнаружить убегающие молекулы, чем горячую точку прямой видимости.

Другая ситуация - запах, не связанный с жарой. У нас и раньше бывали утечки в контуре охлаждения, и запах охлаждающей жидкости тоже был своеобразным. Я даже не буду вдаваться в подробности теперь уже древнего случая с мертвым грызуном в каналах. :)

Я был удивлен, насколько чувствительны эти датчики. Очевидно, H2S / меркаптаны и т. Д. (Обычные виновники) обнаруживаются на уровнях ниже ppm.

enter image description here

19
ответ дан 28 November 2019 в 19:13

Как человек, который раньше работал электронщиком, у меня есть опыт с «запахами гари», которые не были огнем. Это не редкость.

Я бы не стал закрывать центр обработки данных из-за запаха. Другое дело дым, что-то действительно горит (обычно, но танталовый конденсатор размером с горошину может наполнить дымом и комнату). Удивительно, как сильно пахнет жареный компонент в источнике питания.

TIC или ИК-термометр (полезный инструмент и намного дешевле, чем TIC) не обязательно покажет это, поскольку компонент не выделяет много тепла при все и это внутри футляра. Но проверьте, не работают ли устройства, используйте инструменты мониторинга. При таком запахе в 95% случаев источник питания влияет на производительность всего устройства.

40
ответ дан 28 November 2019 в 19:13

Теги

Похожие вопросы