Não é tão específico quanto o que você está pedindo, mas está limpo e deve fazer o trabalho:
grep install ~/.bash_history
Por padrão, o histórico do bash tem apenas 500 linhas, então, se você usar o terminal tanto quanto eu, provavelmente não irá mostrar tanto assim.
Uma segunda chance é oferecida por meio dos registros de autenticação.
zgrep -Eo 'apt-get install.*' /var/log/auth*
Claro, isso só funciona para o apt-get. Se você estiver usando pip como root, você também pode usá-lo para isso, mas na minha experiência, isso é menos comum (você deve estar trabalhando em um virtualenv).