大约在儿子出生后，他开始认真起来，深悔自己浪费了少年时光。他看到自己的哥哥、大舅子和两位姐夫都通过考试，在外做官，心中一定很惭愧。这些事对平平庸庸的人不会有什么影响，但是对一个智力超群——由他的“全集”可以看出来——的人来说，这种情况一定很难忍受。他后来在妻子的墓志铭中指出，她一直激励他前进，因为苏东坡的母亲是一个受过良好教育的女子。不过老祖父对儿子倒没说什么，也没有管他，由各方面看来他似乎只是一个执拗、古怪、游手好闲的才子。朋友们问他儿子为什么不读书，他又为什么不管，他平静地说，“我不担心”。表示他充满自信，知道这位聪明而迷路的儿子总有一天会看出自己的错误。