Usando cut :
diff <(cut -c 20- file1) <(cut -c 20- file2)
Nota: com GNU cut , a opção de caractere -c realmente funciona em bytes e não em caracteres, mas isso deve ficar bom, desde que sua saída comece com carimbos de data / hora e não caracteres especiais.