王家的尊贵，其实是以王太后牵头，成帝具体落实，王凤便是王家的代表人物。王凤一旦落架，那么王家势必没落，对于同是王家人的王音来说，这不啻于惊天霹雳。于是他两股战战，心惊肉跳，二话不说，撒腿就跑去找王凤，将偷听到的情报告诉了王凤。
王凤虽然尊贵，但他毕竟是个臣子，他现在拥有的一切都是皇帝赐予的，没有皇帝的支持，他其实什么也不是。他们这些当舅舅的，对于皇帝来说，就像武帝当初骂舅舅那样，抛弃他们就像死老鼠一样。
他得知皇帝外甥现在正在与人商量，要撸自己下来，也大惊失色。但是成帝是他手中长大的一个娃娃，成帝什么心性，他是最熟悉不过了，他马上来个先发制人，称病回家，然后上书，请求辞职。
他的这封辞职信写得非常凄惨，不断数落自己，承认错误，“臣材驽愚戆，得以外属兄弟七人封为列侯，宗族蒙恩，赏赐无量。辅政出入七年，国家委任臣凤，所言辄听，荐士常用。无一功善，阴阳不调，灾异数见，咎在臣凤奉职无状，此臣一当退也。《五经》传记，师所诵说，咸以日蚀之咎在于大臣非其人，《易》曰‘折其右肱’，此臣二当退也。河平以来，臣久病连年，数出在外，旷职素餐，此臣三当退也。陛下以皇太后故不忍诛废，臣犹自知当远流放，又重自念，兄弟宗族所蒙不测，当杀身靡骨死辇毂下，不当以无益之故有离寝门之心，诚岁余以来，所苦加侵，日日益甚，不胜大愿，愿乞骸骨，归自治养，冀赖陛下神灵，未埋发齿，期月之间，幸得瘳愈，复望帷幄，不然，必置沟壑。臣以非材见私，天下知臣受恩深也；以病得全骸骨归，天下知臣被恩见哀，重巍巍也。进退于国为厚，万无纤介之议。唯陛下哀怜！”
成帝收到了辞职信，他看着看着，眼泪就下来了，大舅真可怜啊！要不是大舅，当初谁保护自己？哪里有自己的今天？大舅为国事操劳，就算没有功劳，也有苦劳啊！现在他以垂垂暮年，却要被贬黜，自己于心何忍？于心何忍？
他仿佛看到满脸皱纹的大舅，被人搀扶着回老家去了，凌厉的风吹乱了老人的头发，撕扯着老人的衣服，夕阳下，这一幕情景多么凄惨！成帝感念心生，唏嘘不已。王太后听说这事儿，也吃不下饭。
废黜王凤的事儿，最终没有落实，弹劾王凤的王章，还被蒙在鼓里，他以为自己要改变朝廷这种主弱臣强的局面了，但让他没想到的是，他在弹劾王凤没多久之后，尚书就弹劾他了：“知野王前以王舅出补吏，而私荐之，欲令在朝阿附诸侯；又知张美人体御至尊，而妄称引羌胡杀子荡肠，非所宜言。”王章下狱，并死在里面，妻子女儿被发配凄凉地合浦。冯野王因为王章的推荐，受到牵连，被降职处分。
这件事最终以王家大获全胜而告终。成帝内心最深处那根弦被触动，从此对王凤只有信任和感激，再无猜疑。王凤借此事件成功除掉了一些对自己有威胁的人，排除异己，将大权牢牢抓在手中，“郡国守相、刺吏皆出其门。”王家兄弟也顺便巩固了地位。从此，五侯开始了竞相奢华的时代。
“帝城佳气接烟霞，草色芊芊紫陌斜。霁雪未消双凤阙，春风先入五侯家。”
五侯的奢靡生活，在历史上是很有名的。“五侯群弟，争为奢移，赂遗珍宝，四面而至；后廷姬妾，各数十人，僮奴以千百数，罗钟馨，舞郑女，作倡优，狗马驰逐；大治第室，起土山渐台，洞门高廊阁道，连属弥望。”当时老百姓都看不下去了，编着歌谣四处唱：“五侯初起，曲阳最怒，坏决高都，连竟外杜，土山渐台西白虎。”
五侯的奢靡生活，在历史上是很有名的。“五侯群弟，争为奢移，赂遗珍宝，四面而至；后廷姬妾，各数十人，僮奴以千百数，罗钟馨，舞郑女，作倡优，狗马驰逐；大治第室，起土山渐台，洞门高廊阁道，连属弥望。”当时老百姓都看不下去了，编着歌谣四处唱：“五侯初起，曲阳最怒，坏决高都，连竟外杜，土山渐台西白虎。”
五侯之家，堪比皇室。有一次，成都侯王商生病，问太后借了明光宫来养病。大臣借皇宫，这在西汉历史上是绝无仅有的。五侯的胆大奢侈可见一斑。非但借宫殿，他们甚至以皇家宫殿为榜样，给自己盖私殿。有一次，成帝到王商家里去，结果发现王商居然穿城引水，将澧水引到自己家，顺地势造成人工河，然后行船，使用皇帝的仪仗，让俊男美女整天唱：“唱山歌嗳，这边唱来那边和……”
成帝不高兴了，舅舅这不是太过分了吗？但是让成帝更不高兴的事情又出现了，成帝到曲阳侯王根家里去，发现王根家居然修建了跟白虎殿差不多的工程。白虎殿是未央宫中的一处宫殿，是皇帝办事的地方，王家居然也盖这么一处建筑！这下成帝彻底发火了。当时王凤已经去世，王音取代王凤成为辅政大臣。成帝将王音找来，大骂一顿。王商王根听说，也吓坏了，跑去找太后谢罪，说是愿意给脸上刺字、割掉鼻子来赎罪。弟弟要死要活，王太后大怒了，王太后大怒，成帝不好受了，成帝不好受，更迁怒于五侯，他将司隶校尉、京兆尹找来问罪：“你们知道五侯搞这么大动静，怎么不举奏，任由他们胡作非为！”然后又将尚书找来，询问文帝处死舅舅薄昭的事儿。
成帝其实不过是