康熙皇帝在位期间就经常性地在承德的避暑山庄办公，出于行政便利的考虑，在承德避暑山庄附近就有诸多王公大臣的府邸，当年的狮子园就是雍正皇帝的住所。狮子园在避暑山庄西北部的狮子沟附近，所以得名为狮子园。康熙五十一年时，皇帝下令将这里赏赐给皇四子胤禛，作为他的住所。狮子园又称小宫，当地百姓称之为四爷府。这座府邸面积超过了5.6万平方米，里面有寺院、宅邸、殿堂和书院，胤禛曾七次邀请康熙皇帝来狮子园玩赏。此外，这里还是弘历、弘昼等皇孙读书学习的地方。