却说晋征西大将军桓温，因石氏乱亡，已屡次奏请晋朝廷经营攻略中原，辄不见报。

晋穆帝年龄尚幼，褚太后以无有母家资源的女流之身寡断，一切国政，均归会稽王司马昱主持，领司徒光禄大夫蔡谟，本已实授司徒，诏书屡下，终不就职。

褚太后遣使敦劝，蔡谟仍然固辞，对周围比较亲近的人说：“如果我当了司徒，必将为后人所耻笑，所以按道义我不敢接受任命。”诏令多次下达，褚太后也派人去说明意图，蔡谟最终还是不接受任命。

永和六年（350年），蔡谟复向朝廷上疏陈疾，乞请骸骨回乡，缴上光禄大夫领司徒印绶。晋朝廷有诏不许。

晋穆帝于是亲自临朝，派侍中纪据、黄门郎丁纂去征召蔡谟。蔡谟向他们陈说自己身患重病，并派主簿谢攸陈述自己愿意辞让的意见。从早到晚，朝廷派来征召蔡谟的使者往返十多次，然而蔡谟就是不去任职。

当时穆帝年仅八岁，临朝一天，非常疲倦。他问周围的人说：“所征召的人为什么到现在还不来？临朝什么时候才能结束？”

褚太后考虑到晋穆帝和臣下们都很疲劳，于是就下诏说：“一定不来的话，就结束临朝吧。”中军将军殷浩奏请免除吏部尚书江虨的官职。

会稽王司马昱禁不住恼恨起来，于是给尚书曹下令说：“蔡谟傲慢地违抗皇上的命令，这是没有臣下之礼的行为。如果陛下在上卑躬屈膝，臣子在下又不履行君臣大义，那么也就不知道靠什么来处理朝政了。”

于是公卿们便上奏说：“蔡谟狂妄傲慢地对待皇上的命令，罪同叛逆，请求将他送交廷尉依法论处。”

蔡谟十分害怕，率领他的子弟们到朝廷去叩头谢罪，自己又到廷尉处等待治罪。

殷浩想处以蔡谟死刑，恰巧徐州刺史荀羡来到朝廷，殷浩就此询问荀羡，荀羡回答说：“如果蔡公今天被处死，明天就一定会出现齐桓公、晋文公那样举兵问罪的行动（指桓温）。”

殷浩于是放弃处死蔡谟的打算，下诏将其免官并贬为平民。

那桓温听闻殷浩擅权，很是动忿，一时无词弹劾殷浩，只是以把北伐为名，向朝廷呈入一篇表文，略称：“朝廷养寇，统为庸臣所误。”这句话明明是指斥殷浩。

殷浩在内廷扣留住桓温的奏表，不使批答，谁知桓温竟率众士兵数万，顺流东下，屯兵武昌，隐然有入清君侧的寓意。

廷臣闻报，相率骇然惊愕。殷浩亦急得没法，到是欲离开朝廷退去职位