Para 10.10 e versões anteriores (e 11.04, em uma sessão do Ubuntu Classic)
Abra o Update Manager ( Sistema > Administração > Gerenciador de Atualizações ).
Na guia Atualizações, há uma caixa suspensa para "Verificar atualizações:", com opções para Diariamente, a cada dois dias, semanalmente ou a cada duas semanas.
Ou você pode desativá-lo e apenas verificar manualmente sempre que quiser.