Alguns dos firewalls comerciais para PCs têm opções para isso. Há muito tempo atrás, quando usei o alarme de zona, ele me acionou em cada uso de IP e solicitou verificação.
Mais recentemente, tenho usado o Outpost Security Suite e seu firewall. É muito configurável, a ponto de fazer o que você quer e bloquear tudo e ativar a atividade uma vez ou lembrá-la.