杨秀便开始为所为起来。

杨秀喜奢侈浮华，追求享乐。他斥资修建了豪华的王府，衣用都十分讲究。杨秀执法严苛，多杀无辜，剥削百姓，聚敛财，民众苦不堪言。

杨秀不仅肆意放纵，而且还有野心。他违犯制度，超越规格，车服饰，均比照天样式。太杨勇被废之后，杨广取而代之，杨秀对此十分不满，时常怨言。杨广知以后，对他怀恨在心。

杨秀想扩大自己的势力，上书朝廷，请求扩充军队，增加官佐，可杨不予批准。西边境现战事，朝廷派兵征讨，杨秀想推荐自己的亲信统兵，杨也不同意。

杨常对独孤皇后说：“秀儿不甘居于人下，肯定没有好结果。我在世，自当不用担心；我死后，他必定会造反。”于是，杨逐步削夺了杨秀的权力，以限制他的势力。

杨广当上皇太以后，知杨秀心中不服，日后必为祸患，于是让杨素暗中察访他的过失，收集罪证。杨秀确实有不少奢靡之事和不法行为，被杨素抓住许多把柄。杨素向皇帝禀报，杨决定依法理。

杨把杨秀召回朝廷，要治他的罪。杨广假惺惺地泪为弟弟求情。杨说：“往日秦王杨俊骄奢华，朕依法置，没想到杨秀不以为戒，反而比杨俊更甚，决不能宽恕他。”

大臣庆整劝谏说：“杨勇已被废黜，杨俊已经去世，陛下的儿不多了，何必如此重罚？蜀王生耿直，如被严惩，恐怕不能保全，望陛下三思”。杨大怒，要割庆整的，吓得庆整不敢吭声了。

杨广痛恨杨秀，一心要置他于死地，于是设了一个狠毒的计策，来陷害杨秀。杨广暗中令人制作了两个木偶人，分别写上杨、杨谅的名字，丝绳束手，铁钉穿心，埋在华山下面，然后再让杨素装模作样地挖来。杨广又冒充杨秀的名义，写了一篇“檄文”，咒骂皇帝。

杨素将这些“罪状”奏报皇帝，杨见了，怒不可遏，下诏责骂杨秀，说他包藏祸心，图谋不轨，是叛逆之臣和不孝之，列举了杨秀十项大罪，痛骂他灭天理，逆人，有豺狼之心，坏到了极。

杨毕竟念及父之情，没有杀杨秀，但剥夺了杨秀一切官职和爵位，贬为庶民，并且将他囚禁起来，不得与妻儿女相见。杨迁怒于杨秀的属官，受牵连获罪的有一百多人。

杨秀遭贬，又被囚禁，愤懑不已，但没有办法，只好上表谢罪说：“我因为幸运，成为皇，九岁就得到了荣华富贵。可我愚笨，不知珍惜，犯了国法，辜负了父母大恩。如今福分已尽，情愿以死谢罪。恳请父皇怜悯，死前能让我与儿见上一面，然后再赐我一个墓，让我的尸骨有个去。”

这个时候，独孤皇后已经死了，没有人再关心杨秀了。杨秀被囚禁起来，失去了自由，边只有两个又丑又凶的婢女。杨秀度日如年。

杨死后，杨广当了皇帝。因为杨秀已经构不成威胁了，杨广没有杀他，但继续行禁锢，对他严加看。杨秀后来被宇文化及所杀，活了四十六岁。

杨最小的儿杨谅，从小被父母惯坏了，为所为，后来竟然起兵造反，自然没有好下场。

造反的五杨谅