O problema é que o Xorg usou tanto o driver evdev quanto o tslib para o mesmo dispositivo.
Arquivos de configuração padrão do Xorg examinam dispositivos de entrada e, se for uma tela sensível ao toque, o evdev será usado por padrão:
Section "InputClass"
Identifier "evdev touchscreen catchall"
MatchIsTouchscreen "on"
MatchDevicePath "/dev/input/event*"
Driver "evdev"
EndSection
O Xorg parece não verificar se o dispositivo já está sendo usado com outro driver. É por isso que usou os dois drivers. A solução foi comentar esta seção em /usr/share/X11/xorg.conf.d/10-evdev.conf
.