桓秘字穆子。少有才气，不伦于俗。初拜秘书郎，兄温抑而不用。久之，为辅国将军、宣城内史。时梁州刺史司马勋叛入蜀，秘以本官监梁益二州征讨军事、假节。勋平，还郡。后为散骑常侍，徙中领军。孝武帝初即位，妖贼卢竦入宫，秘与左卫将军殷康俱入击之。温入朝，窃考竦事，收尚书陆始等，罹罪者甚众。秘亦免官，居于宛陵，每愤愤有不平之色。温疾笃，秘与温子熙、济等谋共废冲。冲密知之，不敢入。顷温气绝，先遣力士拘录熙、济，而后临丧。秘于是废弃，遂居于墓所，放志田园，好游山水。后起为散骑常侍，凡三表自陈。诏曰：“秘受遇先朝。是以延之。而频有让表，以栖尚告诚，兼有疾疢，省用增叹。可顺其所执。”秘素轻冲，冲时贵盛，秘耻常侍位卑，故不应朝命，与谢安书及诗十首，辞理可观，其文多引简文帝之眄遇。先冲卒。长子蔚，官至散骑常侍、游击将军。玄篡，以为醴陵王。