Você pode fazer isso usando formatação condicional sem necessidade de macros. Selecione a primeira linha a formatar, escolha 'Formatação condicional' na faixa de opções, depois 'Nova regra ...' e 'Usar uma fórmula para determinar quais células devem ser formatadas'
Use o botão de formato para definir um estilo de sublinhado adequado (definindo a borda inferior das células).
Na caixa da fórmula, você precisa de algo assim:
= WEEKNUM($A2, 1) <> WEEKNUM($A3, 1)
Você pode então usar o pintor de formatos para copiar a formatação condicional para as outras linhas da sua tabela.
Isso deve funcionar se suas datas estiverem na coluna A e sua primeira linha de dados for a linha 2. Se não, você precisa ajustar $A2 e $A3 de acordo.
O parâmetro 1 informa WEEKNUM() que sua semana começa em um domingo. Se você precisar começar em um dia diferente, consulte o WEEKNUM() documentation para verificar qual parâmetro usar.