O DSRM também funcionará bem.
No entanto, se você quiser ficar 100% do PowerShell, é possível usar o provedor ADSI para fazer isso nativamente no PowerShell sem módulos.
$computer = "computername"
$dom = [System.DirectoryServices.ActiveDirectory.Domain]::GetCurrentDomain()
$root = $dom.GetDirectoryEntry()
$search = [System.DirectoryServices.DirectorySearcher]$root
$search.filter = "(&(objectclass=computer)(name=$computer))"
$search.findall() | foreach-object{$_.GetDirectoryEntry() } | foreach-object{$_.DeleteObject(0)}