赵广汉欣然领会，前往拜访右将军霍禹。好言相劝，希望霍家把奴仆交出来。霍禹怒气冲冠，却不得不委婉道：“府君，这件事能不能缓几日？我霍府奴仆被抓，传出去不好听，既有损我霍家声誉，也对皇后殿下名声有碍。我的意思，等我把他辞退了，你随意抓捕。到时候他不是我霍家的人，自然与我霍家无关，如何？”赵广汉大喜，欣然同意。
霍家与京兆尹一战，可谓赔了夫人又折兵。胡显气不过，怒道：“你堂堂右将军，妹妹还在宫里当皇后，一个小小的京兆尹都能骑在你头上作威作福，你也不怕丢你爹的人？”霍禹叹气道：“后母责备的是，只不过京兆尹秉公办理，并不是有意针对咱们霍家。他是个硬柿子，不好捏。”胡显稍稍点头道：“那就找个软柿子捏，咱们霍家得找回颜面！”
霍禹首先想到了大鸿胪董梁，当初董梁也是反对为霍光以天子礼仪下葬的人之一。大鸿胪分管蛮夷事务和诸王列侯朝聘事务，下面有鸿胪文学、大行治礼丞、大行卒史、行人、翻译、主客等。
一日卫尉范明友上奏道：“启禀陛下，广陵王想朝见陛下，不过至今大鸿胪不给安排。听说是大鸿胪府的人想要索贿，索贿不成，所以不给安排。”董梁大惊，忙起身道：“微臣不知道卫尉这话从何说起！自从微臣执掌大鸿胪府，事无巨细全部亲自审阅，岂会有索贿之事？至于广陵王的事，不是微臣不给安排，实在是奏疏上达，至今没有音讯。”
病已大惊道：“奏疏上达，没有音讯？召未央卫尉来！”
不一会霍山前来，他是未央卫尉，兼领尚书事。霍山躬身道：“陛下，微臣详细查问了一遍，实在是没有大鸿胪府的奏折。尚书仆射、尚书丞都可为微臣作证！”顿时群臣哗然，议论纷纷。董梁忙下拜道：“启禀陛下，微臣也有人证！鸿胪文学、大行治礼丞都可为微臣作证。”群臣争辩不休，有人认为问题出在大鸿胪府，也有人认为问题出在尚书署。
病已心惊肉跳，暗暗皱眉。他心里清楚，董梁向来秉公办理，不徇私情，问题必然出在尚书署。尚书署本为少府的属官，负责管理少府文书和传达命令，职位不高，但权力较大。后来汉武帝为了削弱相权，设内朝官，任用尚书上呈群臣奏章，参议决策，于是尚书一跃成为实际上的丞相。霍光去世后，病已为了笼络霍家，任命霍光侄孙霍山领尚书事。没想到短短数月，整个尚书署成了霍山的掌中玩物。
卧榻之侧岂容他人鼾睡？病已自然不会允许有人在自己眼皮底下建立独立王国。立刻下令道：“这件事交给丞相和御史大夫去查，务必查清原委，不要冤枉一个好人，事事秉公办理，但求无愧于心。”
丞相韦贤、御史大夫魏相齐齐领旨。详查之下，问题果然出在尚书署。病已暗恨，碍于皇后面子，没有重罚霍山，只是责备道：“未央卫尉，你领着尚书事，尚书署出了这么大问题，难道你就没有责任？尚书署该整顿了！先把尚书丞撤了，交廷尉治罪。另外，今后