Ok, uma varredura rápida na fonte ack Encontrei a seguinte opção de linha de comando para obter o resultado necessário
ack --jsp --nogroup -o '(</(div)>)'
a.jsp:5:</div>
a.jsp:10:</div>
b.jsp:3:</div>
b.jsp:8:</div>
ou
ack --jsp --nogroup --output='$2' '(</(div)>)'
a.jsp:5:div
a.jsp:10:div
b.jsp:3:div
b.jsp:8:div