Sim, você pode criar outra partição ext4 a partir da única partição do Ubuntu sem reinstalar usando o Gparted Partition Editor.
Para isto, você tem que inicializar a partir do live disk do Ubuntu ou do live-disk do Gparted. Note que você não pode redimensionar uma partição montada no Gparted.
Siga os passos indicados em esta resposta.