Em Preferências → Avançadas → Geral → Config Editor ...,
insira calendar.registry.*.color
na caixa de texto de pesquisa e você encontrará as configurações que deseja editar.
Para saber qual deles é para qual calendário, pesquise calendar.registry.*.name
.