Eu consegui compilar o kernel Linux 3.18.0-29-rpi2 com módulos fbtft para o Ubuntu 14.04 no Raspberry Pi 2.
Este GitHub Gist contém os passos que eu segui:
Pacote .deb do kernel Linux com módulos fbtft:
linux-image-3.18.0-29-rpi2_3.18.0-29.30_armhf.deb
link