Eu consegui trabalhar de acordo com o seguinte método:
Primeiro, pesquisei \n e substitui-o por <li></li> . Isso me deu a partida e a finalização de li em cada nova linha em uma única saída de string.
Em seguida, procurei por $ e substituí-lo por </li> . Isso me deu terminando li no final da string que foi produzida pelo método acima.
Depois usei a seguinte fórmula para inserir <li> no início da string. Usou esta fórmula na célula em branco adjacente e a arrastou até o fim para obter todas as células geradas.
=CONCATENATE("<li>";A1;)