A função do Excel que eu precisava é chamada de indireta ().
Não sei como isso realmente funciona, então espero que alguém possa ajudar com isso, mas a chamada de função que funcionou para mim é
=INDIRECT(ADDRESS((ROW(A1)-1)*4+COLUMN(A1),1))
que encontrei aqui: link
Nota: isso me obrigou a adicionar o texto ao excel, onde eu obteria essa linha cheia de colunas, e então inverteria para que eu tivesse uma coluna cheia de linhas. A função provavelmente poderia ser modificada para funcionar com a minha configuração original, mas eu não tinha tempo para isso no momento. Provavelmente vai revisitar em breve.