Что-то продолжает соединяться с Голубятней и Постфиксом

Я также рекомендовал бы проверить первый vsftpd.

Другим возможным выбором является proftpd, который имеет много параметров конфигурации.