因為石亨的故意陷害與家奴的誣告，楊俊于景泰五年五月、景泰六年九月兩次被關入刑部大牢，差一丟丟就讓砍頭了。
雖然有孫太后從中曲護，為其求情，但還是在景泰七年（1456）二月被削去了昌平侯爵位。同年十二月，其長子楊珍承襲昌平侯的爵位。
七年之后，朱祁鈺病重不起，石亨等人發動奪門之變，將朱祁鎮再次扶上了皇位，改元天順，不久景帝朱祁鈺駕崩。
楊俊與權臣石亨結怨不是一朝一夕的事情，得從明朝的征兵制度說起。當時大明王朝屢受蒙古部落的侵擾，為了加強邊防軍事力量，多次在全國征兵，選撥下級軍官采取打擂臺比武等方式來決定參賽者的軍銜。
宣德元年，朝廷再次征兵，楊俊、石麟（石亨唯一的兒子）同時報名應征。楊洪知道兒子楊俊脾氣暴躁，做事魯莽，特意把楊俊關在家里，叮囑他好好練武，不要到外面去參加打擂比賽，惹是生非。
開始，楊俊還是很聽話，天天在家中的后院自覺練習刀槍劍戟、舉制石、站馬步，楊洪就對他放松了看管。其實楊俊一直想去比武場試試身手，不過礙于父親的威嚴只好作罷。
楊倫、楊杰、楊智等弟兄看出楊俊的心思，悄悄的吩咐仆從：“你們外出辦事的時候，記得我們打探擂臺的進展情況。我們俊哥會重重有賞的！”
仆人興沖沖從比武場回來后，繪聲繪色的描述參賽者激烈的對戰場面，并有意無意煽動這些小伙子的情緒：“比武場高手如林，正打得熱火朝天呢，百聞不如一見。如果不親自去一趟，實在是太可惜了！”
楊智他們聽了，實在是心癢難耐，恨不得自己有一對翅膀，馬上飛到比武場去了。幾個正要出門，忽然想起了什么，又折了回來楊杰推開了后院的大門：“俊哥，告訴你個好消息，比武還沒有打完，你要不要去看看？”
正在專心練習楊家將槍法的楊俊沒有聽到，院落里的樹葉被他一個秋風掃落葉打得滿地都是。楊俊沒有看到楊智朝他背后走了過來，殺了一個回馬槍，嚇得楊智趕緊趴在地上，才沒有被楊俊傷到。
楊俊回頭見楊智在身后的地上抱著頭，大喝一聲：“楊智，你找死啊？沒有看到俊哥在練武嗎？有事不知道從前面來呀。”
楊俊將槍柄豎立在地上，停了下來，楊智才戰戰兢兢的起身了：“俊哥好身手，方才要不是我躲得快，就被你刺中了。”
楊俊一臉嚴肅的道：“不是跟你們說了，我練武之時不要隨便靠近么？”
楊智擦了擦額頭上的汗珠：“我這不是有急事要告訴你嗎？”
楊俊一聽有急事，馬上滿面笑容：“你這小子鬼得很，一定是比武場有好消息了？”
幾個兄弟也湊了上來，一起說：“對呀，俊哥真是神機妙算。”幾個小腦袋湊在了一起嘀咕了一陣，一致決定：“咱們前往觀看，不上臺打擂不就行了。”
楊俊還在猶豫，不敢去：“到了那個場合，我怕我忍不住。”
楊倫拍著胸脯道：“哥哥我攔著你就是了。”
楊智道：“說了大半天，真掃興。你不去，我們可就去了哦。”
楊俊將頭扭了幾下：“去就去，說好了的，誰都不準上臺的！”
幾個小家伙伸出手，架在一塊：“好，一言為定！”于是兄弟幾個溜出了家門，偷偷來到了比武場。比武場好不熱鬧，觀看比賽的人太多了，兄弟幾個好不容易才擠到前面。
楊智看了許久，臺上的擂主身材魁梧，武藝純熟，已經接連打死、打傷了好幾個人，在擂臺上耀武揚威：“還有誰敢上來？有沒有人啊？”臺下鴉雀無聲。
楊智就問楊俊：“俊哥，站在擂臺上的是誰啊？”。
楊俊歪著頭道：“這家伙是石亨的獨子石麟，一般人他根本就沒放在眼里。”
楊智道：“石麟也太囂張了，我去教訓教訓他。”
楊俊道：“不可！石麟非等閑之輩，自幼習武，受到其父石亨的真傳，武功十分了得。”
石麟見臺下的楊俊兄弟在咬耳朵，就指著楊智挑釁道：“小子，你敢不敢上來？信不信我一拳就打死你！”
楊智氣得牙癢癢的，拳頭捏得咯咯作響，正要往上跳。楊俊一把攔住了楊智：“智弟，你氣力不如我，還是我去！”
楊智道：“俊哥放心，這小子我可以擺平！你現在剛剛入伍，有軍職，不能去！”
說完楊智便上了擂臺：“我楊智來也——”
在臺上才和石麟打了幾個回合，楊智就被石麟飛起一腳踢倒在擂臺上，口吐鮮血。幾個弟兄急忙將楊智抬下擂臺，請來郎中治療，不一會就吐血就止住了。
輕松戰勝了楊智，石麟更是忘乎所以了，在臺上度著方步，口出狂言：“都說楊家將武藝如何如何高強，我看也不過如此，浪得虛名罷了。姓楊的，還有敢上來的嗎？”臺下頓時爆笑聲、唏噓聲、哨呼聲不斷。
楊俊見楊智并無大礙，站立起來，閉上眼睛，大腦一片空白，來不及多想飛身跳上了擂臺。石麟見來者是楊俊，下意識的后退了幾步。雖然倆人在軍營中見過幾次面，并未真正交過手，石麟清楚來者不善。
楊俊道：“石麟，你等著！我先去標名掛號，再和你打也不遲！”然后二人簽下了生死狀。
一場激動人心的比武就此拉開了序幕。兩人話不投機便插招換式、拳腳齊舉戰在了一起。楊俊得到楊洪的真傳，使出一套凌厲無比的楊家拳，密不透風。石麟也不甘示弱，使出猛虎掏心、蛇鶴八步等招式和楊俊廝打，暫時不分勝負。
二十幾個回合后，楊俊使出獨門絕技——無敵霹靂旋風腿，打得石麟頭暈目眩，逐漸有些招架不住了。突然楊俊一腳踢中了石麟的胸部，石麟騰空而起，重重摔倒在擂臺上。
石麟掙扎著正要爬起來，楊俊已經一個箭步跳到了跟前，一腳踩住石麟的右腿，雙手抓住他另一條腿的腳踝，稍稍往上一抬，大聲喝道：“姓石的，服不服！不服劈了你！”
倒在地上的石麟被死死給控制住了，惱羞成怒，破口大罵：“不服，我就是不服！姓楊的，有本事你放了我！”想伸手鎖住楊俊的喉嚨，就是夠不著。
臺下眾人高喊：“劈了他！劈了他！”
楊俊本來就是火爆脾氣，剛才楊智被石麟打得吐了血，心中憋著一口氣。楊倫知道要出大事了，在臺下跳起來喊：“楊俊，放了他吧，要不就闖大禍了——”
沒有想到，臺下的觀眾繼續喊：“楊家將——天下無敵——劈死他——”
楊智也爬了起來朝著楊俊高呼：“俊哥，怕個鳥，整死他——”楊智這么一喊，可就壞事了！
只見楊俊雙手一使勁就把石麟的大腿架在了右肩上，往后一背，只聽“咔嚓”一聲，石麟被劈為兩半，立時躺在臺上不動了。楊杰嚇得趕緊閉上了眼睛，幾個兄弟知道闖禍了，趕緊離開了比武場.....
石亨到來了，抱著兒子冰涼的尸體慟哭不已：“麟兒，你真傻啊！爹爹教你好漢不吃眼前虧，說一個服字就有這么難嗎......”
因為簽有生死契約，石亨也沒有辦法，不敢拿楊俊怎么樣。可是石、楊兩家從此算是結上了仇，為楊俊日后被石亨陷害下獄，被明英宗斬首埋下了禍根。
細節決定成敗，性格決定命運。楊俊性格豪爽桀驁，為人直率強勢，得罪了不少人，一生中多次被彈劾。楊洪在世的時候，還可以保他，因為他果敢善戰，又值朝廷用人之際，每次被罷黜后旋即又被起用。
“土木堡之變”后，英宗被俘，景帝繼位。于謙輔政，石亨被提拔為都督，封為武清伯，掌管五營兵馬，成為了京城守衛軍隊的副統帥，地位僅在于謙之下。后來楊俊被召還北京，負責操練京師軍馬。
也先率軍大舉進攻，兵鋒直指北京城。景帝命楊俊為都指揮同知巡守京北要隘——居庸關。時任京城五軍總兵官的石亨已經向楊家下手了，假公濟私暗算楊俊，以京城兵馬不足、要保衛京師重地為由，僅讓楊俊帶兩哨人馬（約二百人）前往居庸關。幸好楊俊福大命大，和居庸關守將羅通一起英勇的抵擋住了瓦剌軍瘋狂的進攻，并且立下了戰功。
景泰元年（1450年）二月初，叛徒喜寧（原英宗朝內宮太監）引領瓦剌軍由獨石口入塞。萬全都指揮江福得悉后，報與楊俊。
二月十五日，楊俊親率騎兵埋伏于野狐嶺關旁，設計令江福等人擒住喜寧，又將護送喜寧的千余瓦剌士兵大部斬殺。
景帝升楊俊為中軍都督府右都督，部將都指揮使陶忠押運糧草，遇到瓦剌軍的襲擊，將糧草丟失。楊俊大怒，杖打陶忠，失手致其死亡。景帝以“虜寇聲息甚急，防守至重”為由赦免了楊俊之罪，調其回京。