姚崇乃「神龙政变」的骨干分子之一，与张柬之、敬晖、袁恕己、恒彦笵、崔玄暐等后来被册封的所谓「五王」，合谋推翻女帝。众叛里以他最有先见之明，于逼女帝退位时，当场痛哭，女帝问他何事哭泣，姚崇答道：「诛凶逆者，是臣子之常道，岂敢言功；今辞违旧主悲泣者，亦臣子之终节也。」也因这番说话，李显继位后，被握大权的武三思外调。
岂知正因如此，使他避过与五王同样的厄运，保住小命。
以智计论，除过世的狄仁杰外，大唐朝无人能及。