廢立皇後，群臣都議論紛紛，隻有李勣推三阻四，不是生病，就是告假，遲遲沒有發表意見。究竟他怎麽想，會傾向於哪一邊？唐高宗心裏沒譜，於是這天，他把李勣召來了，試探他說：“朕欲立武昭儀為後，遂良固執以為不可。遂良既顧命大臣，事當且已乎？”意思是我想立武昭儀為皇後，可是褚遂良堅決反對。褚遂良是顧命大臣，這事兒是不是就得拉倒了？唐高宗充滿希望地看著李勣。李勣是個有大智慧的人，他沒有正麵回答，隻微微一笑，說：“此陛下家事，何必更問外人！”陛下您娶誰當老婆那是您自己的事，您問別人幹嗎啊？這句話聽起來好像輕飄飄的，實際是舉重若輕，振聾發聵啊。這話一出，高宗和武則天在廢立皇後問題上的不利局麵就一下子扭轉過來了，可以說是峰回路轉，柳暗花明。為什麽呢？我們要弄清楚李勣這句話的分量和意義，就得先分析一下李勣當時的地位。
李勣是什麽人物呢？李勣就是民間傳說中大名鼎鼎的徐茂公，瓦崗寨的英雄，唐初的名將。民間傳說早有“呼風喚雨諸葛亮，神機妙算徐茂公”的說法。他原名徐世勣，字懋功，投降唐朝後因為功勞顯赫，唐朝就賜他姓李，他就改叫李世勣了。李世勣、李世民，隻差一個字，跟哥倆兒似的，這名字裏有個“世”字跟皇帝重了，那是忌諱的事情。還好唐朝避諱不太嚴格，皇帝活著的時候還可以這麽叫，可是唐太宗李世民一死，李勣也覺得還是不大合適，於是他就把自己的名字改為“李勣”，去掉了“世”字。
李勣在隋末大亂的時候跟著翟讓造反，鼓動翟讓發展勢力，翟讓也很聽從他的意見，勢力擴張得很快。後來，翟讓被李密火並，李勣又跟著李密。李密其實不太信任他，覺得他是翟讓的人，於是就讓他鎮守黎陽糧倉去了，位置就在現在河南省的浚縣。雖然李勣的大帳安置在那兒，可是實際上他控製的範圍遠不止於此，當時河北、河南、山東乃至江蘇的北部都在他的掌控中。後來，李密被王世充打敗，投降了唐朝。