Sim, você está certo de que o Excel lida com isso. Selecione seu intervalo com valores de início / fim e, em seguida, na faixa de opções da Página inicial, selecione Preencher - > Série.
Sim, também lidará com intervalos mais complexos, como o seu segundo exemplo.