As miniaturas que você está procurando são armazenadas em um cache na pasta Dados do usuário do Google Chrome, localizada em
%LOCALAPPDATA%\Google\Chrome\User Data\Default\ (Windows)
/users/[username]/library/application support/google/chrome/default (OSX)
/home/<user>/.config/google-chrome/default (Ubuntu)
Basta excluir o arquivo Thumbnails
. Assim que tiver concluído, visite cada site de interesse para que o Chrome gere uma nova miniatura para esse site.
Informações de esta postagem da HowToGeek .