Eu usei o atributo da empresa e fiz isso:
Set-DynamicDistributionGroup -Identity "Test Group" -RecipientFilter
{((RecipientType -eq 'MailContact') -and (Company -eq 'Example'))}.
Será um passo extra por pessoa, mas como esse outro filtro tem sido um problema, estou bem com ele.