楊堅、獨孤氏一共生有5個兒子,長子楊勇身爲太子,任過大將軍大司馬、上柱國等顯赫職務,並和父親一起處理軍國政事。楊堅對這個皇位接班人顯然很器重,有時甚至有着偏愛,常常親暱地呼叫他的小名。太子參政提議的重大意見多被採納，楊堅曾在大衆場合下向羣臣誇耀自己沒有妾姬,五子同母絕不會發生像前朝君王妻妾成羣而最終諸子廢立紛爭之事。
然而,恰恰是太子楊勇自己掀起了波瀾的起緣，從而最終走向了被廢黜的道路。大概在開皇十年(590年)以前,楊勇就已開始尋獵女色,太子居住的東宮內有許多美貌女子,並按皇太子妃嬪姬妾不同身份,依次排列良娣、良媛、昭訓等名分。據正史記錄,楊勇先後寵愛過高良娣、王良娣、成姬和其他宮女,生有10個兒子,還不算女兒。楊勇的長子楊儼,就是他與太氏(後封昭訓)在宮外私戀的結晶,隋文帝一直懷疑這不是楊勇的親生骨肉,指責兒子擾亂宗族高貴的血統。楊勇卻不以爲然，公開頂撞父皇干涉自己私生活過多。
後來楊勇又喜愛另一昭訓雲氏,使她禮同正嫡妻子。開皇十一年(591年),太子法定正妻元妃在長期受冷落後突然患心疾暴死,這位元妃是北朝鮮卑高門名家的後代。隋文帝和獨孤皇后夫婦懷疑是楊勇把她毒死的,曾嚴厲地責備楊勇,可兒子滿不在乎,聲稱還要殺死元妃的父親元孝炬。隋文帝認爲這是太子想害自己而遷怒於元妃，因而在東宮文思殿爲兒媳婦舉行了隆重的哀悼葬禮,有意做給兒子看。楊勇極爲不滿,反而揚言:“阿孃(娘)不給我個好女人,真是可恨。”狂言母后周圍的女侍將來全是他的獵物。
天下不疼愛自己子女的父母很少，楊堅夫妻畢竟還是護兒子的。尤其楊勇是他們沒做皇帝前布衣所生,又爲長子只要聽話改錯就好,所以沒有深追此事。可是那位雲昭訓自此猖獗太子東宮,這使獨孤皇后心中不平。這絕不是一般的婆媳爭鬥,它導致了一場太子更換、影響深遠的歷史結局。
7年後的冬至,整個長安充滿了慶祝氣氛,民間在此日更易新衣、備辦飲食、享祀祖先;宮廷內皇帝則接受百官朝賀,盛飾禮儀,俗稱“排冬仗”。可是這年冬至不知誰出的主意,讓朝廷百官都去朝見太子,楊勇居然也大張旗鼓地接受朝見。隋文帝知道後,認爲“朝太子是“賀”,如此違背禮制,無疑包含着奪權之意，因此迅速下發《停百官朝貢東宮詔》,從此內心定了廢黜之意。
獨孤皇后這時更感到她對太子的信任與偏愛是一種歷史錯誤。儘管她曾在宮內每晚督促兒子們誦佛讀經,希望他們清心寡慾、儉樸誠懇,結果卻完全相反。除了次子楊廣外,幾乎沒有一個成器的。
開皇十九年(599年),鎮守揚州的楊廣回京朝見父母,獨孤皇后見他車馬樸素、待人有禮,愈發疼愛,淚水不禁滿面,向兒子傾訴衷腸:“睍地伐(楊勇小名)極其厭煩我,專寵阿雲毒害元家女,我還不能過問。我活着尚且如此，我死後你們還不被他魚肉。每想到東宮繼承之事,你父皇千秋萬歲之後,你們兄弟要向阿雲朝拜行禮,這是多麼大的痛苦啊!”獨孤皇后說完，悲不自勝。楊廣嗚咽不止,母子倆相對哽咽很長時間。據後來那些正統史學家分析這次母子會面是一個很關鍵的轉機,獨孤皇后決心不惜一切代價要扶持楊廣,而楊廣看到兄長被疏遠的良機,也決心加快策劃他哥哥垮臺的陰謀。
隋文帝曾派遣有才華的裴政和劉行本先後擔任太子老師,希望他們匡正約束兒子,但都被楊勇排擠調離。隋文帝57歲後，對楊勇猜忌戒備日趨嚴重，父子之間互相偵察,楊堅認爲自己在仁壽宮是大小事情都有密探飛報太子，因而一度極爲害怕楊勇謀害他，夜間甚至不敢脫衣睡覺。這一切或許都與他晚年的自危感有關係,京城與州縣都遍佈他派出的暗探,太子東宮警衛也用他自己的禁軍調換,處處懷疑和嚴防太子形成死黨。在這種不祥徵兆下,太子楊勇被廢儲另立,已是不可避免的事了。
