文学光禄大夫夏侯胜、侍中傅嘉等多次进谏，规劝过失，刘贺竟派人按簿册责问夏侯胜，又把傅嘉捆起来关进监狱。

刘贺荒唐无道，丧失帝王礼义，搅乱朝廷制度，大臣杨敞等多次进谏，刘贺置若罔闻，非但不改，反而一天比一天更利害。

霍光也没想到刘贺竟然如此不服管教，担心刘贺这样不受控制要危及国家，使天下百姓不安，便与群臣商议，禀告皇太后上官氏，废掉刘贺让他返回昌邑国，赐给他汤沐邑二千户，从前昌邑哀王刘髆的家财全给了刘贺。

对昌邑哀王刘髆的四个女儿也各赐汤沐邑一千户。

其后不久，昌邑国被废除，降为山阳郡。

刘贺被废，大汉王朝再一次出现权力真空，下一任皇帝由谁继承大统成了朝野上下最为关心的问题，只是谁也不敢妄自议论，因为这直接关系着权臣霍光的地位。

霍光再一次查阅皇族族谱，想从武帝直系后代中再找一位皇子皇孙，却找不到合适的人。

此时已进入朝堂的赵充国注意到这一动向，召集兄弟五人商议。

赵充国率先说道：“国不可一日无君，如今刘贺被废，匈奴日渐猖獗，国家正需要一位贤能的君主主持大局，我看刘病已正合适，他本是武帝曾孙，太子刘据亲孙，论血统论背景都当之无愧，没有人比他更适合了！”

一旁的赵安国担忧道：“霍光是现在朝堂之上最有权势的人，他才是无冕之王，你看他废立皇帝易如反掌无人敢反对，朝堂之上表面风平浪静其实暗流涌动，杀机四伏，病已能应付得来吗？”

赵充国道：“我答应过太子刘据，要照顾好病已，如今有机会光耀门楣，发扬太子一家的光彩为何不出山，再说天下共主之位本就是刘据一脉的，如今天道有轮回眷顾病已，也算是老天开眼了，至于霍光有我们几人从旁护卫谅他不敢造次!”

范明友道：“霍光如若忠心为国自然与我们井水不犯河水，但是如若有僭越之行岂能容他乱政！”

韩增说道：“我看可行，强盛国家的重任只有病已能行，我们可保举病已！”

赵安国又说道：“我们几人去保举定然引起霍光警觉，霍光此时不想看到他有潜在对手，最好由文官举荐！”

田广明便说道：“我想到一个人，邴吉，他是在廷尉监牢中从小照顾过病已，我没猜错的话此时此刻他也有此意！”

赵充国一听觉得有理，便带领几人前去寻邴吉商议。