有人再比他更了解自己的母亲、当今陛下武则天了。
武则天与高宗平起平坐、并称“二圣”，她把儿子和文武大臣们玩弄于股掌之上，最后索兴建立了自己的皇朝做了皇帝。李显不得不承认母亲的成功是必然的，她身上有坚定的性格、强烈的权力欲、高超的驾驭人事能力，当然还有做事的狠辣和雷霆手段，在这些方面李显自愧不如。
李显心中非常清楚母亲的手段，自己稍微有半分不满就会引来杀身之祸。当年王妃赵氏死于非命，李显就没敢表示一丝一毫的不满来。
永隆元年武则天废掉李贤太子位之后，立即便将李显封为太子，并将他的继弦韦氏册为太子妃。
永隆三年腊月高宗于去世，李显当上了皇帝。
李显继位后称武则天为“皇天后”，他发现自己并没有因为做了皇帝，境遇就有所改变。相反，他的处境更加危险了。
李显并不是没想过与母亲和平共处，但他的身份和地位决定着这种想法不现实，他做了皇帝势必就挡了母亲的路。两个哥哥先后被废，姨母表姐陆续死于非命，这让李显有了深刻的危机感，他虽然是皇帝，但母亲能随时决定自己的生死。所以，在母亲面前李显战战兢兢，不敢动作。
直到“那件事情”发生后，李显全家被流放，高处不胜寒的窘境才暂时告以段落。
“还有吗？”李显接着又问。
“其二，以您做英王时所展现出的才能来看，根本不会做出如此简单幼稚的事情，这只能说明您为了自保不惜自污名声，可惜天下没一个人能真正理解您的一片苦心！”
很多人都认为，李显在武则天亲生的四位皇子中是最窝囊的一个。论才没才，论貌没貌，既无李弘的仁孝廉谨、嫉恶如仇，又无李贤的才学出众、办事利落，更不像李旦在大臣中有极好的人缘。
难道是李显做了皇帝有些忘乎所以，非给他岳父韦玄贞官升侍中不可。当裴炎以为这样做有违朝廷先例，对他劝谏时，他却随口道：“就是把天下给了我岳父，也没有什么不可以。”
李显这话让武则天找到了借口，于是一个巴掌把他由皇座上打下来，废为庐陵王，流放到房州。
其实，李显早就看出来了，就是不说“把天下给了我岳父”那句浑话，他在皇位上也坐不长久。母亲总会找碴儿最终废掉他的。龙椅只能坐一个人，要下来的只能是他，坐在皇位上的必须是武则天，这才是事情的本质。
与其被母亲拿下，李显不如以退为进，自己将把柄送。
果不出李显所料，武则天后来做了皇帝。远在房州的李显识趣的奏表遥贺，这让武则天很满意。李显一家的生活因此大为改观，首先是圣神皇帝册封已废为庶人的李重润为庐陵王世子，制书由使者专程送至房州，这算是给了李显一线生机，让他暗自松了口气！
京中隔三差五便有封赏送来，知州知县见此也不敢再过分刁难。打这以后，往日的那般难忍的贫寒也就不再了。
正因为李显表现