獨(dú)孤楷抵達(dá)益州后，楊秀還是不肯啟程，在獨(dú)孤楷一再勸解警告之下，楊秀才肯動(dòng)身出發(fā)。楊秀上路時(shí)，臉上流露出一副不甘的表情，這一點(diǎn)被獨(dú)孤楷注意到，他不動(dòng)聲色地下令部隊(duì)提高警戒，隨時(shí)準(zhǔn)備戰(zhàn)斗。楊秀走了四十余里，有些后悔打算派兵襲擊獨(dú)孤楷，便派出間諜偵察，探知獨(dú)孤楷的軍隊(duì)一直處在高度備戰(zhàn)狀態(tài)，才打消念頭。

楊秀抵達(dá)長(zhǎng)安之后，隋文帝接見了他，卻一句話也不說，這使楊秀萬分難受。次日，隋文帝嚴(yán)厲的責(zé)備了楊秀，楊秀也承認(rèn)自己確實(shí)有罪，請(qǐng)求寬恕，此時(shí)一旁的楊廣哭著跪在地上請(qǐng)求隋文帝原諒楊秀，這真可謂是貓哭耗子假慈悲啊!

隋文帝對(duì)楊廣的哭求也不予理睬，并說：“頃者秦王糜費(fèi)財(cái)物，我以父道訓(xùn)之。今秀蠹害生民，當(dāng)以君道繩之?！闭f完后，立即把楊秀交給了執(zhí)法部門，并命楊素等人調(diào)查審理。

蜀王落到了楊素手里，這下可把楊廣樂壞了。他決定要向?qū)Ω稐钣乱粯樱荒芙o楊秀任何翻身的機(jī)會(huì)。就與楊素一起又策劃了一個(gè)木偶事件。

影視形象：楊秀

楊廣命人暗中制造了兩個(gè)木偶，再用繩索綁住木偶的手，又用鐵釘釘住木偶的心，之后加上腳鐐手銬和重重枷鎖，一木偶寫隋文帝楊堅(jiān)，一木偶寫漢王楊諒，另寫：“請(qǐng)西岳慈父圣母收楊堅(jiān)、楊諒神魂，如此形狀，勿令散蕩。”

之后找人埋起來，再讓楊素挖出來。當(dāng)楊素把這兩個(gè)木偶交給隋文帝時(shí)，楊堅(jiān)大怒，并大聲喊道：“天下間竟有這樣的兒子。”幾天之后，楊秀便被貶為庶人，同楊勇一樣軟禁到內(nèi)侍省。