从照片中不难看出来，当年的文昌阁与今天的区别还是很大的，当年的文昌阁是三层建筑，而且旁边小亭子有两层檐。原始的文昌阁比现存的文昌阁高出一大截，而且装饰更为精美，上面还有一座西洋大钟。可以看出在清漪园时代的文昌阁整个建筑都是比较独特的。现在我们看到的颐和园是慈禧重修后的景象，因为当时的财政原因，将三层的文昌阁修成两层，这样整体的形象和感觉就比清漪园时代矮了好多。

其实不只文昌阁，从现有的资料来看，慈禧重修过的颐和园，许多建筑都比之前矮了很多，比如两层的昙花阁变成单层的景福阁，三层的香岩宗印之阁也变成了单层，还有许多完全消失的高层建筑，如西堤上的景明楼，湖中心的治镜阁、凤凰墩，后山构虚轩、花承阁等。文昌阁一方面是颐和园的陆地关口，另一方面在建筑中起到了画龙点睛的作用。在中国古代的园林艺术里面讲究对称。当年的文昌阁里供奉着文昌帝君，管文的。而与之相对的就是西面的宿云檐，那上面供奉的是关圣帝君。一文一武，遥相呼应。