No Ubuntu, há um script que é executado assim que o monit é iniciado, se existir.
/etc/monit/monit_delay
Você pode simplesmente adicionar um monit unmonitor all
a esse script. E todo o monitoramento será desativado basicamente assim que o serviço for iniciado.