Não, você não pode impedir que as pessoas apontem suas entradas DNS para você mais do que você poderia impedir que alguém acidentalmente fornecesse seu número de telefone em vez do seu.
Quando você diz que quer "rejeitar o acesso", o que você quer dizer? Você pode configurar o seu servidor web para mostrar uma mensagem "Desculpe, $ domínio não mora aqui" se eles acessarem o link ... Mas não há t muito que você pode fazer para parar, por exemplo, conexões SSH (já que elas se preocupam apenas com endereços IP e não com nomes de domínio).
Para expandir um pouco: sim, seria possível (e, na verdade, fácil) configurar um registro DNS que você possui para apontar para um servidor que você não possui. É na verdade (mais ou menos) comum. Por exemplo, eu possuo wolever.net
, mas aponto pictures.wolever.net
no serviço S3 da Amazon, por isso, quando sirvo imagens, parece que elas vêm do meu domínio, não de algum lugar aleatório na Internet.