因为石亨的故意陷害与家奴的诬告，杨俊于景泰五年五月、景泰六年九月两次被关入刑部大牢，差一丢丢就让砍头了。
虽然有孙太后从中曲护，为其求情，但还是在景泰七年（1456）二月被削去了昌平侯爵位。同年十二月，其长子杨珍承袭昌平侯的爵位。
七年之后，朱祁钰病重不起，石亨等人发动夺门之变，将朱祁镇再次扶上了皇位，改元天顺，不久景帝朱祁钰驾崩。
杨俊与权臣石亨结怨不是一朝一夕的事情，得从明朝的征兵制度说起。当时大明王朝屡受蒙古部落的侵扰，为了加强边防军事力量，多次在全国征兵，选拨下级军官采取打擂台比武等方式来决定参赛者的军衔。
宣德元年，朝廷再次征兵，杨俊、石麟（石亨唯一的儿子）同时报名应征。杨洪知道儿子杨俊脾气暴躁，做事鲁莽，特意把杨俊关在家里，叮嘱他好好练武，不要到外面去参加打擂比赛，惹是生非。
开始，杨俊还是很听话，天天在家中的后院自觉练习刀枪剑戟、举制石、站马步，杨洪就对他放松了看管。其实杨俊一直想去比武场试试身手，不过碍于父亲的威严只好作罢。
杨伦、杨杰、杨智等弟兄看出杨俊的心思，悄悄的吩咐仆从：“你们外出办事的时候，记得我们打探擂台的进展情况。我们俊哥会重重有赏的！”
仆人兴冲冲从比武场回来后，绘声绘色的描述参赛者激烈的对战场面，并有意无意煽动这些小伙子的情绪：“比武场高手如林，正打得热火朝天呢，百闻不如一见。如果不亲自去一趟，实在是太可惜了！”
杨智他们听了，实在是心痒难耐，恨不得自己有一对翅膀，马上飞到比武场去了。几个正要出门，忽然想起了什么，又折了回来杨杰推开了后院的大门：“俊哥，告诉你个好消息，比武还没有打完，你要不要去看看？”
正在专心练习杨家将枪法的杨俊没有听到，院落里的树叶被他一个秋风扫落叶打得满地都是。杨俊没有看到杨智朝他背后走了过来，杀了一个回马枪，吓得杨智赶紧趴在地上，才没有被杨俊伤到。
杨俊回头见杨智在身后的地上抱着头，大喝一声：“杨智，你找死啊？没有看到俊哥在练武吗？有事不知道从前面来呀。”
杨俊将枪柄竖立在地上，停了下来，杨智才战战兢兢的起身了：“俊哥好身手，方才要不是我躲得快，就被你刺中了。”
杨俊一脸严肃的道：“不是跟你们说了，我练武之时不要随便靠近么？”
杨智擦了擦额头上的汗珠：“我这不是有急事要告诉你吗？”
杨俊一听有急事，马上满面笑容：“你这小子鬼得很，一定是比武场有好消息了？”
几个兄弟也凑了上来，一起说：“对呀，俊哥真是神机妙算。”几个小脑袋凑在了一起嘀咕了一阵，一致决定：“咱们前往观看，不上台打擂不就行了。”
杨俊还在犹豫，不敢去：“到了那个场合，我怕我忍不住。”
杨伦拍着胸脯道：“哥哥我拦着你就是了。”
杨智道：“说了大半天，真扫兴。你不去，我们可就去了哦。”
杨俊将头扭了几下：“去就去，说好了的，谁都不准上台的！”
几个小家伙伸出手，架在一块：“好，一言为定！”于是兄弟几个溜出了家门，偷偷来到了比武场。比武场好不热闹，观看比赛的人太多了，兄弟几个好不容易才挤到前面。
杨智看了许久，台上的擂主身材魁梧，武艺纯熟，已经接连打死、打伤了好几个人，在擂台上耀武扬威：“还有谁敢上来？有没有人啊？”台下鸦雀无声。
杨智就问杨俊：“俊哥，站在擂台上的是谁啊？”。
杨俊歪着头道：“这家伙是石亨的独子石麟，一般人他根本就没放在眼里。”
杨智道：“石麟也太嚣张了，我去教训教训他。”
杨俊道：“不可！石麟非等闲之辈，自幼习武，受到其父石亨的真传，武功十分了得。”
石麟见台下的杨俊兄弟在咬耳朵，就指着杨智挑衅道：“小子，你敢不敢上来？信不信我一拳就打死你！”
杨智气得牙痒痒的，拳头捏得咯咯作响，正要往上跳。杨俊一把拦住了杨智：“智弟，你气力不如我，还是我去！”
杨智道：“俊哥放心，这小子我可以摆平！你现在刚刚入伍，有军职，不能去！”
说完杨智便上了擂台：“我杨智来也——”
在台上才和石麟打了几个回合，杨智就被石麟飞起一脚踢倒在擂台上，口吐鲜血。几个弟兄急忙将杨智抬下擂台，请来郎中治疗，不一会就吐血就止住了。
轻松战胜了杨智，石麟更是忘乎所以了，在台上度着方步，口出狂言：“都说杨家将武艺如何如何高强，我看也不过如此，浪得虚名罢了。姓杨的，还有敢上来的吗？”台下顿时爆笑声、唏嘘声、哨呼声不断。
杨俊见杨智并无大碍，站立起来，闭上眼睛，大脑一片空白，来不及多想飞身跳上了擂台。石麟见来者是杨俊，下意识的后退了几步。虽然俩人在军营中见过几次面，并未真正交过手，石麟清楚来者不善。
杨俊道：“石麟，你等着！我先去标名挂号，再和你打也不迟！”然后二人签下了生死状。
一场激动人心的比武就此拉开了序幕。两人话不投机便插招换式、拳脚齐举战在了一起。杨俊得到杨洪的真传，使出一套凌厉无比的杨家拳，密不透风。石麟也不甘示弱，使出猛虎掏心、蛇鹤八步等招式和杨俊厮打，暂时不分胜负。
二十几个回合后，杨俊使出独门绝技——无敌霹雳旋风腿，打得石麟头晕目眩，逐渐有些招架不住了。突然杨俊一脚踢中了石麟的胸部，石麟腾空而起，重重摔倒在擂台上。
石麟挣扎着正要爬起来，杨俊已经一个箭步跳到了跟前，一脚踩住石麟的右腿，双手抓住他另一条腿的脚踝，稍稍往上一抬，大声喝道：“姓石的，服不服！不服劈了你！”
倒在地上的石麟被死死给控制住了，恼羞成怒，破口大骂：“不服，我就是不服！姓杨的，有本事你放了我！”想伸手锁住杨俊的喉咙，就是够不着。
台下众人高喊：“劈了他！劈了他！”
杨俊本来就是火爆脾气，刚才杨智被石麟打得吐了血，心中憋着一口气。杨伦知道要出大事了，在台下跳起来喊：“杨俊，放了他吧，要不就闯大祸了——”
没有想到，台下的观众继续喊：“杨家将——天下无敌——劈死他——”
杨智也爬了起来朝着杨俊高呼：“俊哥，怕个鸟，整死他——”杨智这么一喊，可就坏事了！
只见杨俊双手一使劲就把石麟的大腿架在了右肩上，往后一背，只听“咔嚓”一声，石麟被劈为两半，立时躺在台上不动了。杨杰吓得赶紧闭上了眼睛，几个兄弟知道闯祸了，赶紧离开了比武场.....
石亨到来了，抱着儿子冰凉的尸体恸哭不已：“麟儿，你真傻啊！爹爹教你好汉不吃眼前亏，说一个服字就有这么难吗......”
因为签有生死契约，石亨也没有办法，不敢拿杨俊怎么样。可是石、杨两家从此算是结上了仇，为杨俊日后被石亨陷害下狱，被明英宗斩首埋下了祸根。
细节决定成败，性格决定命运。杨俊性格豪爽桀骜，为人直率强势，得罪了不少人，一生中多次被弹劾。杨洪在世的时候，还可以保他，因为他果敢善战，又值朝廷用人之际，每次被罢黜后旋即又被起用。
“土木堡之变”后，英宗被俘，景帝继位。于谦辅政，石亨被提拔为都督，封为武清伯，掌管五营兵马，成为了京城守卫军队的副统帅，地位仅在于谦之下。后来杨俊被召还北京，负责操练京师军马。
也先率军大举进攻，兵锋直指北京城。景帝命杨俊为都指挥同知巡守京北要隘——居庸关。时任京城五军总兵官的石亨已经向杨家下手了，假公济私暗算杨俊，以京城兵马不足、要保卫京师重地为由，仅让杨俊带两哨人马（约二百人）前往居庸关。幸好杨俊福大命大，和居庸关守将罗通一起英勇的抵挡住了瓦剌军疯狂的进攻，并且立下了战功。
景泰元年（1450年）二月初，叛徒喜宁（原英宗朝内宫太监）引领瓦剌军由独石口入塞。万全都指挥江福得悉后，报与杨俊。
二月十五日，杨俊亲率骑兵埋伏于野狐岭关旁，设计令江福等人擒住喜宁，又将护送喜宁的千余瓦剌士兵大部斩杀。
景帝升杨俊为中军都督府右都督，部将都指挥使陶忠押运粮草，遇到瓦剌军的袭击，将粮草丢失。杨俊大怒，杖打陶忠，失手致其死亡。景帝以“虏寇声息甚急，防守至重”为由赦免了杨俊之罪，调其回京。