奏響門閥制度的挽歌當(dāng)了皇后的武則天，頭腦清醒地盯著自己的對(duì)手。無(wú)論把這解釋成是她個(gè)人的性格氣質(zhì)，或者說(shuō)是順應(yīng)政治斗爭(zhēng)不可抗逆的邏輯，反正她沒(méi)有放過(guò)任何一個(gè)阻礙她入主后宮的政敵。起初她還作一點(diǎn)寬厚的姿態(tài)?；实哿⑺秊榛屎蟮脑t令下達(dá)后兩天，她上的第一份表奏要求褒賞去年“面折庭爭(zhēng)”阻止進(jìn)封她為宸妃的韓瑗、來(lái)濟(jì)。此刻武則天重提這樁舊事，對(duì)韓、來(lái)之輩無(wú)異是一種居高臨下的威懾，無(wú)怪他倆見到此表時(shí)心里十分不是滋味，憂懼之余，“屢請(qǐng)去位”。

武則天春風(fēng)得意，初登皇后寶位之際。

關(guān)照起韓瑗、來(lái)濟(jì)，究竟出自真情還是假意，讓人頗費(fèi)思量。也許她還存一線分化敵黨、籠絡(luò)這兩名新進(jìn)宰相的期望吧?？墒沁@兩人很不知趣，不久又為褚遂良訟冤。韓瑗上疏稱：“遂良體國(guó)忘家，捐身殉物，風(fēng)霜其操，鐵石其心”，請(qǐng)求“稍寬非罪，以順人情”。還說(shuō)：“陛下無(wú)故棄逐舊臣，恐非國(guó)家之福。”褚遂良有冤情，對(duì)此皇帝并不諱言，但恨他“悖戾好犯上，故以此責(zé)之”。

唐高宗李治素稱懦弱，但當(dāng)皇帝多年以后，也并不甘心受制于這批老臣，一心要擺脫長(zhǎng)孫無(wú)忌、褚遂良等人的包圍控挾，這樣就和武則天有了一個(gè)對(duì)付他們的共同點(diǎn)。韓瑗見疏奏無(wú)效，要求解職歸田，又不準(zhǔn)。但已經(jīng)惹惱了武則天。顯慶二年（657年），許敬宗、李義府按皇后旨意，誣奏韓瑗、來(lái)濟(jì)與褚遂良潛謀不軌，捕風(fēng)捉影的借口是他們安排褚遂良由潭州都督改任桂州都督，意在搞里應(yīng)外合，因?yàn)楣鹬荩ń駨V西桂林）向來(lái)是用武之地。八月，韓、來(lái)二人被貶到振州（今海南崖縣西）、臺(tái)州（今浙江臨海）當(dāng)刺史，“終身不許朝覲”。唐朝規(guī)定地方長(zhǎng)官定期朝集，在年節(jié)前入京朝賀，貢獻(xiàn)方物，匯報(bào)地方政務(wù)。

給韓、來(lái)這一特別處分，使他們無(wú)望再上調(diào)回京面見皇上，有一種永劫不復(fù)的味道。兩年后韓瑗死在振州。五年后來(lái)濟(jì)在庭州（今新疆吉木薩爾）刺史任上，與突厥戰(zhàn)陣亡。受韓瑗、來(lái)濟(jì)牽連，褚遂良更被遠(yuǎn)貶愛州（今越南清化），柳從榮州貶往象州（今廣西象州東北）。褚遂良到愛州后哀哀上表，自陳過(guò)去為皇上固爭(zhēng)太子位，又受遺詔輔政的種種功績(jī)，懇求“螻蟻余齒，乞陛下哀憐”。

褚遂良自武德初從薛舉手下歸唐，以文才書法自負(fù)，40年來(lái)爬上宰相高位，年逾60反遭貶責(zé)，遠(yuǎn)放邊州，心情沮喪。哀告不應(yīng)，一蹶不起，次年死于愛州。最后要收拾長(zhǎng)孫無(wú)忌。此人早年從李世民征戰(zhàn)，又策劃了玄武門事件，兼有開國(guó)功臣和佐命元?jiǎng)椎奶厥鈽s譽(yù)，24名凌煙閣功臣中他名列第一。終貞觀之世，他在相位上。高宗皇帝對(duì)這位有顧命老臣身份的母舅一直尊禮優(yōu)崇。