后晋天福三年（公元 938 年），12 岁的赵匡胤再度失学。此前在洛阳，他因骑马惊吓到陈学究而中断学业，此番在汴梁，则是由于老师辛文悦失踪。原来辛文悦竟与拦路大盗有染，其友行劫败露后自杀，辛文悦畏罪潜逃。 知晓真相后，赵匡胤内心对辛文悦仍存感激，因若无此变故，他强烈的学武愿望难以实现。他坚决拒绝父亲再寻先生，在他软磨硬泡下，母亲杜氏劝说赵弘殷，让儿子跟其学武。赵匡胤选择学习父亲擅长的骑在马上仗剑劈刺，凭借高超的驭马技术，在父亲悉心指导下，短短两个月便有模有样。 同年年底，他在一所破庙门口结识了一群年龄相仿的朋友。起初，身为指挥使的父亲担心儿子在外惹事，不许他外出，母亲杜氏也派仆人跟随。但赵匡胤乖巧听话，未给父母添乱，逐渐获得自由外出的机会。这群朋友，在他日后的人生中发挥了重要作用，而破庙的破败，也尽显当时社会的混乱与萧条 。
