杨广最大的帮手是重臣杨素，而杨素动作的第一步也是面见皇后，说杨广的人品真像他老爸，皇后说是啊。儿子像老爸这句话有点学问，推论下来，老爸是皇帝儿子也应该是皇帝！就像地下党对暗号一样，两个人达成了默契。当杨素开始在隋文帝杨坚面前诋毁杨勇大力炒作杨广的时候，独孤皇后又赏赐杨素大量的钱财，到底是辛苦费还是活动经费就很难分析了。杨勇也真倒霉，上面有皇帝老爸压着，下面有晋王弟弟顶着，外面是国公公事公办的说坏话，里面是皇后使劲吹枕边风。真称得上是四面楚歌众叛亲离。要说都是亲生儿子啊，杨坚也曾经很得意的对大臣们宣称，我不像以前的皇帝那么荒淫无道，跟不同的女人生了不同的孩子，他们不亲密，我的五个儿子都是真兄弟，他们不会有争夺储位的事情发生的。结果事实给了老爷子一记响亮的耳光。以后不用说也能猜到了，杨勇肯定没有好啊。
终于在开皇二十年，公元600年，废掉杨勇另立晋王杨广为太子，最狠的是，把监押杨勇的任务交给了杨广。不知道杨坚是老糊涂了还是真的要置杨勇于死地，这是打倒批臭再踏上一支脚，让他永世不得翻身的节奏啊。这下杨勇彻底没机会了，所有申诉的文字材料都被扣下，根本到不了杨坚手里。人要是逼急了啥招都有，杨勇就爬到树上大喊大叫，希望杨坚能听到。后来初唐的虞世南写过一首咏蝉的诗，其中有“居高声自远，非是籍秋风”的句子，灵感是不是从杨勇太子这里来的就不知道了。杨坚还真听到了，打算找杨勇问问，结果杨素说杨勇已经疯了，杨坚这才罢手。等杨坚一死，杨广即位，第一件首要大事就是谎称杨坚有旨意，赐死杨勇。虽然是皇帝了，但是杀自己同父同母的亲哥哥还是有点不好意思，改由老爹杀儿子就好看的多。
其实杨勇疯没疯，杨坚隐约也知道，否则不会在临死发现杨广不是什么好鸟之际想到叫杨勇来，如果是个疯子，叫来有什么用，看他演小品啊。杨勇之所以被废，前面说得都是原因之一，但还有一个重要的原因就是违越制度。就是被杨坚骂死的三子杨俊，违越制度也才是最重要的原因。就像现在，你是什么职务应该享受什么待遇是有规定或是约定俗成的，局长坐桑塔纳处长就不能坐奔驰。杨勇作为太子时，有一年冬至百官去觐见他，他很兴奋，排出乐队，吹吹打打，摆开架式接受了（史书原文是“勇张乐受拜”）。隋文帝很不高兴，说这不符合规矩，有大臣辩解说只是祝贺，不是朝拜。这时的杨坚应该很不爽，因为他批驳了这种说法，杨坚认为，祝贺是私人的事情，应该三三两辆的去，这家伙，由有关部门召集（估计是现在的组织部），大家到的这么齐，太子还穿上正式的礼服，演奏乐曲盛情款待，这时合制度的吗？杨坚专门下诏禁止了这项活动，至于有没有秋后算帐，对这些大臣进行追究，史书上倒没有明确的记载。
杨勇真正要坏事就是从这个时候开始的，演奏的那是什么音乐，明明是招魂曲。
三、杨秀之死
杨坚的四子杨秀，最早被封为越王，不久改封为蜀王，后来担任益州总管，一直经营四川地区，应该有一定的实力。史书也记载他本人容貌雄伟，长得很威风，有胆量有气魄，喜好武艺，按照评书的说法是十八般武艺样样精通。
这样的儿子多好啊，可就是不讨老爹喜欢，就跟诸葛亮看出魏延后脑生有反骨一样，杨坚不止一次对独孤皇后说：“杨秀肯定会不得好死，我活着他还不会出什么问题，要是他兄弟当政，他一定会造反”。既然老爹这样带有色眼睛看自己，那咱就应该老实点，好好表现一下，杨秀不这么认为，反而又去踩了一条“红线”——“车马被服，拟于乘舆”——吃喝玩乐衣食住行都向皇帝看齐。看来是真的要做益州的土皇帝了。