史乘说杨玄感为甚么造反时，是说杨玄感他看到杨广在位期间骄奢淫逸，性多猜忌，无辜搏斗高?、贺若弼等大臣，心中忐忑不安，担忧有朝一日本身也不能幸免。加上此时朝纲渐乱，政治日趋*，杨广滥用民力，大肆挞伐，隋朝将有崩溃之势，是以与诸弟潜谋废帝，起兵反隋的。究竟上杨玄感造反的设法很早就有，就在杨广出征吐谷浑时还军大斗拔谷，他见杨广的步队“从官狼狈“，就有打动“欲攻击行宫”，想挟制杨广，改立秦王杨浩，但是其叔杨慎劝止。杨慎以为隋朝“士心尚一，国末有衅，不成图也”。这是杨素已死三年后的事，恰是隋朝极盛之年，杨慎熟谙到国度强大、繁华、安乐而“不成图”，杨玄感却想政变，可见其背叛之心早已有之且不是为了所谓的天下百姓而是为了一己之私。

斛斯政是北魏太保尚书令斛斯椿的孙子，出身代北官宦世家，能够说也关陇贵族，因有才气器干而为杨素所重，大业中升任尚书省兵曹郎，并因奉称旨渐得杨广信赖，杨素之子杨玄感兄弟俱与之交友。杨广第一次征辽时，兵部尚书段文振病逝于途中，兵部侍郎员雅后也以兵败罢免。杨广因而将兵部军秘密务委交斛斯政，不久升任兵部侍郎。固然段文振死前曾多次提示杨广：“斛斯政为人险薄，不成委以秘密”。但是杨广看重他的才气，以为斛斯政不错，便委以重担。杨玄感谋反时，就与斛斯政通谋，杨玄感暗中派人到辽东，让杨玄纵、杨万硕他们找机遇逃归。兄弟二人找到斛斯政，请他帮手。斛斯政因而捏造文牒，将杨氏兄弟放走。但杨万硕在路过河北高阳县时被监事许华所执，斩于涿郡，而杨玄纵则轻装逃脱。