Não, você não está perdendo nada - acho que resumiu o problema em poucas palavras.
Se você quiser usar esses serviços, precisa confiar que eles não usarão seus dados de maneira incorreta. A única maneira de saber com certeza seria capaz de inspecionar seus sistemas, e eles não permitirão isso.
Como Patrick Harrington afirma em sua resposta existem mecanismos pelos quais a parte 3 rd não vê seus detalhes de login, mas você ainda tem que confiar que eles estão usando-os corretamente.
Então, espere que eles estejam acima do quadro e usem seus serviços, ou assumam um nível de desconfiança e não façam isso.