Se você usar o Assistente de Importação de dentro do Excel (em vez de abrir o arquivo CSV com Arquivo > Abrir), poderá especificar o formato de dados de cada coluna na etapa 3 do assistente e informar ao Excel como interpretá-los.
Clique em Dados > From Text e selecione o arquivo CSV. Em seguida, na etapa 3, selecione a coluna e especifique o formato da coluna.