而后杨素以其父杨敷死于北齐，但未受朝廷追封，上表申述。周武帝因杨素曾做过宇文护的官职而不予理踩他。杨素再三上表，弄得周武帝大怒，命令杀杨素。杨素大声地说：“臣事无道天子，死其分也”。周武帝闻后，对杨素刮目相看，赦其无罪，并追赠其父为大将军，谥忠壮，拜杨素为车骑大将军、仪同三司，并逐步对其有了好感。周武帝曾令杨素草拟圣旨，杨素下笔成章，文词富丽，周武帝赞美道：“善自勉之，勿忧不繁华。”而杨素却答复说：“臣但恐繁华来逼臣，臣无企图繁华”。