Разве SimonJ не дал Вам ответ в его комментарии? Аутентификация SMTP не доступна с набором команд HELO, правильно?
Я думаю, что Вы хотите Канал. Это, кажется, поражает большинство точек, которые Вы ищете - многочисленные источники, надежность (гарантия E2E), способность записать в HDFS (распределенное, отказоустойчивое устройство хранения данных, интегрируется в Hadoop для, отображают/уменьшают.
Править: Я также хотел бы упомянуть Скрайбирование как другую возможность. Это - C++, базирующийся, записанный Facebook, но от этого, кажется, отказался главным образом восходящий поток. Однако, это - намного более низкое место, чем Канал, тем не менее, включая место всех зависимостей от Канала, таких как Служитель зоопарка. И это также может записать в HDFS.
Распределенная установка Splunk соответствовала бы Вашим потребностям, но она кажется, что у Вас есть большой объем данных логов; это лицензируется на основе объема данных, индексированного в день, таким образом, это не было бы дешево.