刘裕于晋哀帝兴宁元年三月十七日（363年4月16日）夜间出生，其时家境贫苦，母亲更在分娩后患病去世。

父亲刘翘无力请乳母给刘裕哺乳，一度打算抛弃他，只因刘怀敬之母伸出援手，养育刘裕，才得以活下来。

刘裕长大后，“雄杰有大度”，身高七尺六寸，风骨奇伟，不拘小节，侍奉继母萧文寿以孝顺闻名。

早年因家境过于贫寒，落魄到靠砍柴、种地、打渔和卖草鞋为生。刘裕仅认识一些文字，曾因为赌博樗蒲而倾家荡产，遭乡里轻鄙，时人大多不能赏识他。

不过，出身琅琊王氏的王谧却对刘裕颇为赏识，王谧曾对他说：“你应当会成为一代英雄。”

刘裕后从军，成为北府军将领、冠军将军孙无终的司马。

晋安帝隆安三年（399年）十一月，五斗米道道士孙恩在会稽（今浙江绍兴）起兵反晋，东南八郡纷起响应，朝野震惊。

晋廷忙派卫将军谢琰、前将军刘牢之前往镇压。或因孙无终的荐举，刘裕转入刘牢之的麾下，担任了参军。

当时的谢道韫在王家平淡地过了数十年，此时，孙恩、卢循起义爆发了。

当时任会稽内史的王凝之，也就是谢道韫的丈夫，已迷恋上道教，面对强敌进犯，不是积极备战，而是闭门祈祷道祖能保佑百姓不遭涂炭。谢道韫劝谏了丈夫几次，王凝之一概不理，谢道韫只好亲自招募了数百家丁天天加以训练。孙恩大军长驱直入冲进会稽城，王凝之及其子女都被杀。谢道韫目睹丈夫和儿女蒙难的惨状，手持兵器带着家中女眷奋起杀贼，但终因寡不敌众被俘，此时她还抱着只有三岁的外孙刘涛。她对孙恩厉声喊道：“这事出在王家，与其他家族的人有什么关系?一定要这么做的话，就先杀了我。”

孙恩此前听说过谢道韫是一位才华出众的女子，今日又见她如此毫不畏惧，顿生敬仰之情，非但没有杀死她的外孙刘涛，还派人将她们送回会稽。从此谢道韫寡居会稽，足不出户只是打理本府内务，闲暇时写诗着文，过着平静的隐士生活。孙恩之乱平定不久，新任会稽郡守的刘柳前来拜访过谢道韫。谢道韫究竟跟他说了些什么，不得而知。事后，刘柳逢人就夸奖谢道韫说：“内史夫人风致高远，词理无滞，诚挚感人，一席谈论，受惠无穷。”谢道韫的后半生写了不少诗文，汇编成集，流传后世。

十二月的时候，刘牢之率部抵达吴地，派刘裕领数十人侦察义军的动向。不巧碰上数千义军，刘裕率众迎战，在随从