Parece que não há uma opção para fazer isso, mas ... a maneira mais feia é:
Vá para
%USERPROFILE%/AppData/Local/Google/Chrome/User Data/Default
e exclua Thumbnails
(sem extensão de arquivo) e, em seguida, visite cada página na nova guia. O caminho pode ser um pouco diferente para sistemas operacionais diferentes do Windows 7.