圓明園雖在1860年遭受了英法聯軍的毀滅性破壞，但整個園區還留有不少建筑遺跡。至少在1870年時，西洋樓有的建筑還算完整，同治在位時對園內中式建筑還有一次半途而廢的大規模重修。直到1895年康有為游圓明園時，還看到“雖蔓草斷礫，荒涼滿目，而壽山福海，尚有無數亭殿……竟日僅能游其一角。有白石樓一座三層，玲瓏門戶，刻畫花卉，并是歐式”。那么，是誰將它徹底毀滅了呢?

火劫：聯軍、土匪與篩土賊

　　當英法聯軍對圓明園瘋狂地進行洗劫時，就有無數的土匪參與了打劫。英法聯軍選擇最貴重的東西搶劫，土匪掠奪剩余的精華，小民則撿拾委棄于道途的零碎，甚至守園太監也有趁火打劫者。易得的值錢物品很快被搜羅的干凈了，有人又把希望寄托在散落、埋沒于塵土中的細碎寶物上，他們操起掃帚和簸箕，在園中道路上飛沙揚塵，守園的太監官兵將他們稱為“篩土賊”，時有諺曰：“篩土，篩土，一輩子不受苦。”所幸的是這時還未傷及建筑。

木劫：圓明園變成木炭廠

　　1900年八國聯軍侵占北京，西郊諸園再遭劫掠。這一次，清政府對圓明園已完全失去了控制，趁火打劫的人已不再滿足于搶劫洋人劫余的財富，他們把園內火劫之余零星分散的建筑、木橋的柱子、樁子鋸斷，用大繩拉倒，園內大小樹木也被濫伐殆盡。當時清河鎮上木材堆積如山，交易繁忙，而園內則炭廠林立，樹枝、樹根全被燒成木炭。不出數月，火劫后的殘余建筑，連同滿園古樹雜木，便蕩然無存，這被后人稱為圓明園火劫之后的“木劫”。此時的圓明園惟剩山石湖泉了。

石劫：賣石頭也能發財

　　民國初期走馬燈一樣更迭的軍閥，都把圓明園作為取之不盡的建筑材料場。溥儀時期的檔案留下了不少無奈的記錄：“軍人押車每日10余大車拉運園中太湖石。”實際上，拆賣的情況遠比檔案中記載的嚴重得多。徐世昌拆走圓明園屬鳴春園與鏡春園的木材，王懷慶拆毀園中安佑宮大墻及西洋樓石料。從此，圓明園廢墟凡能做建筑材料的東西，從地面的方磚、屋瓦、墻磚、石條，及地下的木釘、木樁、銅管道等全被搜羅的干凈，斷斷續續拉了20多年!

　　后人稱此為圓明園火劫之后的“石劫”。石劫中遭受損失最大的是西洋樓景區的歐式建筑。坐落在圓明園西北角上的安佑宮，是清代皇家在園中的祖廟，氣魄宏大，尤其是殿前的兩對華表，雕琢舒朗精美。歷經數劫之后，安佑宮和周圍牌坊林木盡失，惟余兩對華表。

　　1925年初，燕京大學翟牧師私拆華表，其理由是：“我看圓明園內石柱系屬古物，恐有人拆毀，故運至本校保存。如中國用時，即可退還。”現在這對華表依然聳立在北京大學西門內教學樓前。而另一對華表，則成了民國時城內新建的仿古式圖書館門前的裝飾。在這前后，修建中央公園(現中山公園)，甚至籌建香山慈幼園，都以“正當”的理由，在園內拆走珍貴文物。華表尚且可以公開拆運，至今猶存的遠瀛觀的殘石斷柱絕不是人們手下留情、想給后人留下一點可供政治教育的最后“教材”，可能是因為它們的式樣太怪異，實在難以派上用場。