Esse não é um formato estranho, isso é texto. E até converter todas as células de tempo parecido com texto em tempo real (ou seja, um número) e atualizar seu pivô, você não poderá agrupar da maneira desejada.
Felizmente, você não precisa clicar duas vezes em toda a lista. Selecione a coluna, execute Text to Columns (no menu Data ou Alt A E ), Delimited e Finish. A coluna inteira deve ser convertida em números. Agora você pode atualizar o pivô e conseguir agrupar.