Você pode fazer algo assim no WinZip.
Abra o arquivo Zip, selecione todos os arquivos de texto, clique com o botão direito e escolha "Visualizar arquivos com visualizador interno".
Uma nova janela será exibida mostrando o conteúdo do arquivo de texto e você poderá usar as teclas de seta para mover entre os arquivos.