每个王朝接班人的选择都是让皇帝十分难以抉择的问题。杨坚也不例外，皇太子杨勇在史记中记载的是容貌俊美，生性好学，善于词赋之道，个性温和率真。在皇帝和皇后的亲自教导下，皇太子杨勇也是快速的成长起来，为着继承大统所准备着，不出意外的话，隋文帝驾崩之后杨勇也将延续开皇之治。

可能是因为隋文帝夺位不正，到了晚期对接班人的宠爱信任之心日益消减，甚至还有了怀疑之心。有年冬至庆典，百官上朝对皇太子实行朝见之礼，杨勇也高兴的接受他们的祝贺，不接受还好，一接受就坏事了。当时的太常少卿辛亶就打了个小报告给隋文帝，说到：“东宫应该只能用贺，而不能用朝见之礼”。隋文帝认为太子杨勇违反礼制，便下令百官不得再以朝见礼去见杨勇，这一套下来，杨勇心里也不是滋味，之前还是一口一个皇太子叫着，现在就开始冷落了下来。

经历此事，皇太子心性大变，开始变得好色奢侈起来。有位妾侍叫云昭训，因为姿色娇美，杨勇特别钟爱，甚至待遇相比正妻都不相上下，特别是正妻都未诞下子嗣，云氏还为杨勇生下三个儿子。这一比较下，正妻元妃认为受到冷落，气出了心病，没两天就死了。这让文献皇后独孤伽罗可是相当不满，认为是杨勇和云氏合谋害死嫡妻。这在古代社会可是十分恶劣的行为，于是独孤伽罗皇后就派人去中调查。

一来二去，此时还是晋王的杨广知道了皇后对太子有所不满，便装作一副深情男孩的样子获得了皇后的好感，每次独孤伽罗抱怨云氏专宠，正妻元氏早夭的时候，杨广也跟着痛心疾首，这让独孤伽罗内心更加讨厌太子杨勇，而更加喜爱杨广，甚至产生了废黜杨勇的太子之位而改立杨广为太子的念头。

爹不亲娘不爱的下场就是被废太子。但当时很多大臣认为杨勇罪不致废，而且废立太子是国家大事，马虎不得。杨勇也认为自己虽然犯下错误，但绝不到废黜的地步，于是每天都要求面见隋文帝，告诉他自己的冤屈，但每次都被杨广给阻拦下来。情急之下，杨勇就爬上大树，大声呼喊隋文帝，请求可以见他一面。杨广一派的权臣杨素乘机对隋文帝进谗言：“杨勇已经心神丧失了，被妖魔附身”，隋文帝也这么觉得，于是下令将杨勇关押起来。

直到隋文帝卧病仁寿宫之时，现任皇太子杨广和隋文帝的姬妾在身边服侍着，根据记载宣华夫人出去更衣的时候，皇太子杨广想要非礼她，但被抗拒。回到寝宫就声泪俱下的跟隋文帝说了此事，隋文帝得知实情后大怒，于是让兵部尚书柳述和黄门侍郎元岩召回废太子杨勇，打算废掉杨广复立杨勇，但被杨广知道后当天就把皇宫侍卫换成自己的心腹，并让使者进入皇帝寝殿，把其他宫中其他宫女和宦官赶到别处，很快就传出隋文帝驾崩的消息。

隋文帝早年广施仁政，大讲礼仪，致使天下太平，人民和睦。晚年又信奉迷信，不明大理，听信皇后之言，被奸臣迷惑，导致隋朝刚刚开始兴旺，就开始走向下坡路。