O número após o segundo ponto das versões LTS é realmente confuso.
Se você instalar inicialmente o 16.04 (sem pontos), ele terá o kernel 4.4 que receberá atualizações de segurança. Mas se você instalar atualizações regulares, a versão 16.04.3 será mostrada.
Se você instalar um "release point", como 16.04.2, ele tem o 4.8 que não é suportado durante o ciclo de vida 16.04 completo. O kernel 4.8 não é mais suportado, ele será atualizado para o 4.10.
Então, se você quer um lançamento "estável" em termos de drivers kernel e X.org, é preferível instalar a versão 16.04 do Ubuntu. O kernel 4.4 receberá atualizações de segurança até 2021.
P.S. Não está claro quais são os problemas com os quais você "não quer lidar". A diferença mais importante está na versão principal do kernel.