Claro que existe. Dependendo do ataque, pode ser totalmente trivial. O Kali Linux é projetado para hacking ético, para testes de penetração de redes que você controla. Ele não foi projetado para ser usado imoralmente e certamente não foi projetado para lançar ataques impossíveis de controlar.
Muitos ou a maioria dos testes de penetração que podem ser baixados do Kali Linux podem ser facilmente rastreados até o ponto de origem.