楊秀有壹身的好武藝，讓朝中的大臣頗為忌憚，所以楊堅很早以前就對獨孤後說：“楊秀這個孩子壹定會不得好死，我活著時不會出現紕漏，但等我壹死，壹定會跟他的兄弟反目成仇。”為此，楊堅特意將楊秀打發到蜀地去，希望他在那窮鄉僻壤的地方能夠安分守己。
不過楊秀還是沒有吸取教訓，身為親王，各種車馬服飾的規格卻直追皇帝老爹，後來楊勇被廢，楊秀對新上臺的太子楊廣根本就不服氣，楊廣也唯恐日後楊秀會成為自己登基的阻礙，於是先下手為強，陷害楊秀意欲圖謀不軌。楊堅信以為真，將楊秀廢為庶人並幽禁在內侍省，還不準他和自己的妻子兒女相見，就派了兩個蠻地來的婢女供他使喚。
後來楊廣登基後，壹直囚禁著這個弟弟，直到楊廣在江都被殺，宇文化及等人想要立楊秀為帝，但這個提議在商議過後還是被否決了，最後楊秀和自己的幾個兒子壹並被殺害。