人之名，且极善相面，桓彝见其大力称赞己子，于是大喜，即以“温”为子命名。温峤笑道：“果以温为名，则后将易我之姓也。”后桓温长成，为人豪爽，姿貌伟岸，风度不凡，面有七星。少与沛国刘炎相善，刘炎相其貌而称赞道：“子目如紫石之棱，须作猥毛之磔，乃仅亚于孙仲谋、司马仲达之相，贵不可言。”有此断语，桓温自此知名于世。咸和三年，桓彝在苏峻之乱中被叛军将领韩晃杀害，泾县县令江播亦曾参与谋划此事。当时桓温年仅十五岁，枕戈泣血，誓报父仇。咸和六年江播去世，其子江彪等兄弟三人为父守丧，因怕桓温前来寻仇，预先在丧庐内备好兵器，以防不测。桓温假扮吊客，混入丧庐，手刃江彪，追杀其二弟，终报父仇，由此为时人所称许。桓温后娶南康长公主为妻，加拜驸马都尉，并袭父爵为万宁县男。咸康元年，出任琅琊内史，加辅国将军。
庾翼既举荐重用桓温，左右以为殷浩才名冠世，亦请征用。庚翼不以为然，哂笑道：“此辈之人徒有其名，宜束之高阁，俟天下太平之日，然后方可徐议其任。”进言者无不默然。说话的，那殷浩何人，世人皆谓奇才，而庾翼不用？书中暗表，此中自有故事渊源。殷浩字渊源，陈郡长平人，乃豫章太守、光禄勋殷羡之子。见识度量清明高远，年少负有美名，尤其精通玄理，与叔父殷融皆酷爱《老子》、《易经》。人云殷融著书立说虽胜殷浩，但舌战辩论不如，殷浩因此为风流辩士所推崇。有人曾问殷浩：“将欲仕而梦棺，将发财而梦粪，却是为何？”殷浩答道：“官乃臭腐之物，故欲出仕而梦尸棺；钱财本是粪土，故欲发财而梦粪便。”时人以为乃至理名言。当时太尉、司徒、司空三府征召殷浩为官，皆推辞不就。后征西将军庾亮征殷浩为记室参军，累迁任至司徒左长史。安西将军庾翼又请其做司马，后命为侍中、安西军司，殷浩皆称病不就职。隐居荒山近十年，时人将其比作管仲、诸葛亮之流。王蒙、谢尚等人且以殷浩仕隐动向，以预卜江东兴亡。二人同往看望殷浩，知其避世志向甚坚，遂叹息道：“殷浩不问世事，如何面对江东百姓！”庾翼于是寄书于殷浩说道：“当今江东社稷安危，内政委托褚裒、何充，外事依仗庾氏、桓氏，只恐难保百年无忧；一旦国家破灭，危在旦夕。足下少负美名，十余年间内外任职，而今却欲隐退不问国事，于理不合也。今大业尚须杰士，何必盲目追寻古人风范哉！王夷甫乃前朝风流人物，但某鄙其惟求虚名。若以为今世非虞夏之盛，则宜始初既该超然物外不问世事，然则力谋高位，树立名望者何？既名位显赫，则宜光大名教，全心治乱以安，却又高谈老庄，说空终日，不务实际，实长浮华空谈之风。即至晚年，声望犹存，却贪图安逸，专谋自保，终被石勒所虏，身首异地。明德君子，遇会处际，宁可然乎？”殷浩得书，仍执意不出。另殷浩之父殷羡为长沙相时贪残无度，殷浩又不从征聘，庾翼不喜其避世之行，以为沽名钓誉，此番故不征用。
却说庾翼既统三军，诈称欲要移镇安陆，引军北行。前至夏口，复请移镇襄阳。康帝