Sim, essa é a única coisa que você pode fazer. Você não pode ter meia fila, pelo menos se você precisar que as duas metades sejam acessadas separadamente para fórmulas e assim por diante.
Se você realmente não precisa de duas entradas independentes, mas quer colocar duas coisas na célula, você pode pressionar Alt + Enter durante a entrada para adicionar uma nova linha no conteúdo da célula.
Mas isso só vai ajudá-lo se você precisar apenas de texto simples nas células e não precisar usá-las em uma fórmula em nenhum outro lugar. Caso contrário, você precisará criar uma linha extra e mesclar as células que não deseja duplicar. (Se é apenas pela aparência, você provavelmente pode se dar bem apenas colocando uma borda branca entre eles.)