Soa como algo que um script relativamente simples poderia fazer, similar a como você pode disparar compilações em um git post-receive hook, por exemplo. No pseudocódigo:
sudo apt-get update
kversion=$(apt-cache policy kernel | sed .....)
if [ our module not yet available for this kernel ]; then
wget http://jenkins/url_to_trigger_parametrized_build
fi