Use %pylab inline quando você estiver no shell IPython. Você também pode especificar --pylab=inline como um argumento ao iniciar o IPython pela primeira vez.
Quando você diz "janela IDLE", você quer dizer o IDE do Python na biblioteca padrão?