然而姓氏改了，手足之情却难断。对于魏国夫人贺兰氏死于非命，武敏之表现得十分悲伤。除了悲伤，他还对贺兰氏的真实死因起了疑心。在哀悼贺兰氏的时候，高宗向武敏之哭道：“我出门的时候你姐姐还好好的，这才一会儿的功夫，怎么她就死去了呢！”面对高宗的叨念，武敏之一言不发，只是痛哭。
高宗大约觉得武敏之不说话，是因为过于哀伤姐姐的死。但武后却立刻明白了其中奥妙：“这孩子对我起疑心了！”从此她对这个外甥也厌恶起来。
不知是为了报复，还是从姐姐的遭遇知道自己得罪姨母迟早下场凄凉，抑或二者兼而有之，贺兰敏之轻佻骄横，胡做妄为，使武后不堪忍受，却偏偏碍于老母亲荣国夫人杨氏，没法处置，只能眼看着他胡作非为犯错无数。——所有的儿孙都没了指望，老祖母无原则地溺爱唯一的后裔，也是很寻常的事情。然而，关于杨氏偏袒武敏之，史书上却给出了一条令人瞠目结舌的理由：“敏之韶秀自喜，烝于荣国。”也就是说，九十岁的老太太与二十来岁的漂亮外孙乱伦了！真不知是杨老太老当益壮，还是武敏之别有用心？
然而，杨氏毕竟太老了，无论是武后，还是武敏之，都非常清楚她的庇护维持不了多久。
咸亨元年（公元670）八月初二，荣国夫人杨氏病逝于九成宫，享年92岁。
杨氏的死，也给武敏之敲响了丧钟，杨氏死后他的一系列行为，只能用“最后的疯狂”来形容。
杨氏死后，武后拿出内库私房钱给娘家，为母亲建佛寺祈福（武媚有一千个一万个不是，对生母的孝顺还是很可观的）。谁知这些钱财却大多都被武敏之挪为自用；
杨氏的丧期未过，武敏之就脱去了丧服，忙于声色犬马；
太子李弘此时大约十八岁，已经选定了司卫少卿杨思俭的女儿为妃，并定下了婚期。谁知武敏之却对杨姑娘的美色垂涎三尺，暗暗地挑逗这个不谙世事的少女，并终于成功地进入她的闺房。然而杨姑娘没有想到，一直显得温文尔雅的情人却在此时撕去了所有的伪装，强行奸污了她。
纸当然包不住火，何况武敏之逼奸杨氏很可能是蓄意要羞辱姨母一家。武后很快就知道了此事，太子李弘也只能恨恨地接受未婚妻被奸污的事实，虽然说为了保住皇家脸面，无法立即处治武敏之，杨氏与李弘的婚约却只能取消，太子宫的女主人就此易主，换成了以贤德闻名的裴居道之女。——夺妻之恨仅次于杀父之仇，何况是堂堂的未来皇帝？武家人竟做此事，而身为母亲的武后却没有及时为儿子雪恨，这件事势必将使武后与李弘之间的母子之情深受其害。
可怜的杨氏姑娘从此再不见记载，恐怕只剩死路一条。当初她为武敏之所惑，明知自己将成太子妃、未来的皇后，仍然甘冒奇险也要与之来往，可谓爱之深矣，无论如何也想不到从天而降的浪漫会给自己带来这样的惨遇。
杨氏的悲剧，也给渴望真爱的女人们留下了一个提示：死去活来投入的爱，结局并不一定都比平淡的好；位高财阔的男人虽不一定有真爱，可是较“穷”的那个追求者也未见得都安着好心。于男人也是如此：出身高看起来娇惯的女友虽然很可能不好侍候，可是小户人家的姑娘却也未见得就会诚心陪你吃苦。世上绝没有“穷人一定真爱自己”或“富人一定能给我满足”的定理，究竟谁才是对自己最好的那一个，只能靠自己把握了。
太子李弘这时已经成年并多次监国，武后与儿子之间的关系，早已经因为权力之争发生了微妙的变化，因此对于杨氏被辱，这位皇后仍然选择了隐忍的态度。然而武敏之随后的行为却终于突破了她的底线。
武后的底线，就是她心爱的女儿太平公主。
关于太平公主，世人知道武后终其一生都对这个女儿百般宠爱。当然，太平身为女子，不可能成为反武后者利用的政治旗帜，不会威胁到武后的皇权，她本人也很聪明，懂得对母亲应采取何种态度。以上所述，都可以成为太平宠于武后的理由。而从另一个角度看起来，太平公主得宠于母亲，也仿佛是冥冥中注定的事情。
武后的第一个女儿，死在了襁褓中，从种种现象推断，这个小女婴是死在了生母的手下，成为母亲前进的牺牲品。虽然是为了利益不择手段，但不可否认的是，如果没有权力发酵出的罪恶，武后在儿子成年前，还是一个很不错的母亲，慈爱亲和；何况那个小女婴毫无“过失”，从来不曾象兄弟们那样有“触怒”母亲的可能。人心毕竟肉造，在往后的漫漫岁月里，武后当然不免要想起这个可怜的女儿。
唐高宗麟德元年（公元664）三月，距神秘夭折整整十年之际，那个小女婴被父母追封为“安定公主”，上谥号曰“思”，并以亲王级别由德业寺隆重迁葬于崇敬寺。
“思”，从谥法内涵考究，这是一个颇令人回味的谥号——道德纯一曰思；大省兆民曰思；外内思索曰思；追悔前过曰思；不眚兆民曰思；道德纯备曰思；谋虑不衍曰思；柔能自勉曰思；通明爽愿曰思；深虑远道曰思；迩不爽愿曰思；谋虑不偕曰思；念终如始曰思；辟土兼国曰思；追悔前愆曰思。——在所有的含义中，“追悔前过”“念终如始”“追悔前愆”显得特别的触目。后来武氏成为女皇，收唐高祖千金公主为义女，所改的封号也仍然是“安定公主”。母亲的爱与害，同样深不可测。
就在将“安定思公主”隆重迁葬后不久（一般认为就在同年），已经年过四旬的武皇后再次生育：在连续生了一堆儿子之后，她终于迎来了一个女儿，这也是她的最后一个孩子。痛心女儿早丧的父亲和心事重重的母亲，对于这样一个女儿的诞生，其喜可知。太平公主由降生的那一天起，就得到了父母的百般宠爱，而且还是双倍的宠爱。
外祖母杨氏去世的时候，太平公主大约六七岁。也大概就在这个时候，武后向高宗请旨，度女儿出家入道，为杨氏祈福。当然，出于父母的宠女之心，太平并没有离开皇宫，而是仍然过着公主的生活。但既是要为外祖母祈福，太平就不免要经常来往武宅与皇宫之间。让人没有料到的是，所有进入武宅的宫人女官，都统统被武敏之或诱或逼，一逞兽欲。此事一发，武后的忍耐终于到了极限。
咸亨二年（公元671），武后向高宗上本，将武敏之流放雷州，重新改姓名为贺兰敏之。
在去往流放地的途中，贺兰敏之上吊自尽（也有说是途经韶州时被武后的使者以马缰勒死）。此时，距荣国夫人杨氏去世仅十个月。
武敏之的死，可以算在武后的帐上，但若不是他过于放肆放荡，又被杨氏惯坏的话，恐怕也不至于来得如此之快。武敏之消失了，杨氏却享受了极高的哀荣。高宗下令文武九品以上及外命妇都要去武宅吊祭哭灵，并追赠武士彟为太尉、太原王，杨氏为太原王妃。
然而，就在杨氏极享哀荣的同时，武后在朝中却日益受到掣肘，与长子李弘之间的矛盾渐渐无法调和。李弘这时还不到二十岁，却已经替父监国多次，史书说他仁厚并且体弱多病，还常将政务交予身边亲信处理。可以想象，这样的主子真是难逢难遇，早已经被大臣们视做当然的主人。而武后毕竟是皇后，从前儿子年幼，高宗多病，国政时常由她处理，现在却实在不好找理由了。
权力是毒药，更象是毒品，一但尝到了此中滋味，就再难有人舍得丢弃。朝臣和天下人都心知肚胆，武后不甘心就这样回到后宫，李弘也不甘心被母亲当小儿牵制，母子反目只是迟早的问题。
虽然对妻子和妻子的娘家百般宠爱，高宗在原则的问题上仍然是偏向儿子的。何况高宗多病，凡离京疗养武后都一定要陪伴左右，不得不放手让儿子监国发展势力规模。日渐形成的太子势力，令武后难以应对。
就在杨氏去世前不久的三月十八日，武后亲信中地位最高的宰相许敬宗年老退休，武后在朝中失去了她最为重视的臂膀，在儿子和丈夫亲信们的夹击下很快就陷入了权力困境。这一年又逢大旱、日食等异象天灾。武后干脆在母亲去世的第二个月就向高宗上书，表示自愿退出皇后位，以赎天谴。
我觉得，与其说是武后心灰意懒，不如说是她在自己的命运上再一次下了重注。这封辞职信无异于将了太子一军：别以为是母以子贵，其实也是子以母贵。假如不是母亲用尽一切招数正位中宫，你做了嫡子，哪来的太子当？相逼过甚，皇后自请退位，你就成了上有庶兄的废后之子，拿什么名份去当监国太子。
辞职信递到BOSS手里，当然被拒收了。高宗坚决不许武后退位。母子之间的亲情，逐渐被皇权与后权之争蚕食鲸吞。
武后请辞被拒一个月后，太子右中护（左中护为高宗极信任的老臣李勣，由此也可见高宗对长子的偏爱）同东西台三品赵仁本罢相。据说是被退休在家的许敬宗“发挥余热”搞下来的，但是否也可以理解成是武后辞职迫使太子做出的不得己暂退？
赵仁本虽然被罢相，太子的势力仍然不可动摇，高宗也帮着儿子，甚至于起用太子亲信带兵打仗，武后对此也无能为力。