При установке supervisord, как заставить это запускаться на перезагрузках?

Просто перезагрузка и видит, запускается ли она :)

Проверьте, что у Вас есть сценарий/etc/init.d/supervisor или подобный и что существуют соответствующие символьные ссылки в/etc/rc?.d. Если не что-то как

update-rc.d supervisor defaults

должен добиться цели, после того как Вы получаете сценарий запуска в/etc/init.d.

Однако если Вы устанавливаете супервизор от пакета, и он не устанавливал и устанавливал сценарий запуска, Вы наделены правом жаловаться специалисту по обслуживанию пакета.

Вы можете использовать sysv-rc-conf для Ubuntu, где Centos или аналогичный может использовать chkconfig

, если он еще не установлен

sudo apt-get install sysv-rc-conf

, затем

sysv-rc-conf supervisord on