养心殿西暖阁的旁边有一间几平米的小屋，乾隆为他取名“三希堂”，因该处藏有三件书法绝品，一是王羲之的《快雪时晴帖》、一是王献之的《中秋贴》，一是王珣的《伯远贴》。
三希之名还有包涵周敦儒的“圣希天，贤希圣，士希贤”之意，激励自己要不断进取，提高自身修炼、进入更高的境界。