但雍正对这个比自己儿子还小的么弟非常疼宠，视如己出，坚持将他带在身边照顾，和自己的儿子一起进上书房。
皇子当中，弘时的年纪最大，已经十九岁了，弘历十三岁，弘昼只比弘历晚出生一个时辰，他们都在六岁启蒙读书，〈中庸〉对他们来说早已经是背得滚瓜烂熟的书了，但为了年仅八岁、才进上书房读书不久的允秘，他们还是陪著重读了一遍。
允秘生性活泼好动，要他整日念这些无趣又艰涩的文字，简直是痛苦和煎熬，尤其每日天还未亮就得从被窝里爬起来进上书房读书，对年纪幼小的允秘实在是种折磨，因此让他时不时地就对著书本打瞌睡。
偏偏雍正对他极为关爱，每隔几日就要听他背一段书，要是他没背好就会受到雍正一顿训斥，导致他一听见要背书就厌烦，一看到上书房就想逃。