但花没有百日红，卫皇后也会随着年龄的增长而姿色衰老，失去了宠爱。而赵国的王夫人成为汉武帝的新宠，生个儿子被封为齐王。王夫人去世的早，又有中山的李夫人得到了宠幸，生下一个儿子，被封为昌邑王。不久李夫人也去世了。
李夫人得宠时，她的那些兄弟都受到了封赏。她的兄长李延年精于音律，被汉武帝封为协律官，就是管理宫廷歌舞艺人的官员。李夫人去世后，她的兄长李延年，因犯了淫乱后宫之罪被灭门。
李夫人另一个兄弟叫李广利，被汉武帝封为贰师将军，正在征讨大宛，没有被杀。李广利征讨大宛结束后，回到长安，因李广利有战功，被封为海西侯。
李夫人之后，汉武帝同时宠爱尹夫人与邢夫人。尹夫人被封为尹婕妤，品级相当于列侯。邢夫人的封号为娙娥，相当于享有俸禄二千石的官。皇后经常是由婕妤升迁的。
尹夫人与邢夫人同时被汉武帝宠幸，汉武帝曾下令说：尹婕妤与邢娙娥二位夫人不准许相见。
两位夫人都想见一见对方，因汉武帝有令，没人敢帮忙。尹夫人亲自请求皇帝，希望能见一见邢夫人，汉武帝答应了。汉武帝把另外一个夫人装扮起来，几十个侍从跟在后面，假冒邢夫人来见尹夫人。尹夫人走上前去见她说：夫人并不是邢夫人本人。
汉武帝问：为什么这么说呢？
尹夫人说：看她的身段、相貌、以及姿态，都不足以与皇帝匹配。
汉武帝又命邢夫人穿上仆人的衣服，单独前来。尹夫人看见了就说：这次是邢夫人，
说完便哭泣起来，皇帝问为什么见了邢夫人就哭泣？
尹夫人哭着说：我不及邢夫人，我也马上会失宠的，所以伤心。
