Sim, é possível.
Se você clicar com o botão direito na "guia" do bate-papo em grupo, clique em Configurações de notificação ... ele mostrará as palavras-chave de alerta atuais, permitirá alterá-las e ajustará alguns outros recursos.
Além disso, as informações e mensagens do usuário são armazenadas em %appdata%\skype\[your username] no Windows e em ~/Library/Application\ Support/Skype/[your username] no OS X em um arquivo chamado main.db. É um banco de dados SQLite, portanto, você poderia recuperar ou alterar os valores programaticamente, se quisesse.