在《桐江诗话》中记载，该《牧童诗》为黄庭坚七岁时创作，即皇祐三年辛卯（1051年）。一天，黄庭坚父亲黄庶邀请几位诗友一起在家饮酒吟诗。其中一位说：“久闻令郎少年聪慧，何不让他也来吟一首 ！”这时，黄庭坚想起了吹笛子的小牧童，便以牧童为题，作一首诗。