Кришталевий палац пережив свою першу майже катастрофічну пожежу в 1866 році. Пожежа знищила все північне крило палацу та трансепт. на жаль, будівля ніколи не була застрахована, і було мало державного фінансування, щоб усунути масштаби збитків. 25 травня 2023 р.
Кришталевий палац був дорогим для обслуговування та ремонту, і, незважаючи на його ранню популярність у Сіденхемі, фінанси були обмежені. як не вистачало коштів для відновлення пошкоджених вогнем територій, лише Північний неф, Альгамбра та візантійські двори були відновлені.
Причина так і не була встановлена, але багато історій про підпал через розмір будівлі та величезну кількість легкозаймистих матеріалів, що містилися в ній, причиною, ймовірно, була просто жахлива аварія.
Зовсім недавно було 500 мільйонів фунтів стерлінгів пропозиція китайської корпорації ZhongRong відновити Кришталевий палац. Цього разу без боулінгу, натомість шестизірковий (так, шість) готель і міжнародний центр торгівлі дорогоцінним камінням.
У 1852–1854 роках його компоненти були перенесені на Сіденхем-Хілл у Верхньому Норвуді, де вони залишалися (перебудовані в іншій формі від оригіналу) до знищена пожежею 1936 року.
У другому будинку Кришталевого палацу на Сіденхем-Хілл є ще що побачити. Великий скляний палац остаточно згорів у 1936 році нічого з його рами не збереглося. Але кам'яні тераси, які колись підтримували його, залишилися недоторканими, і їх цікаво досліджувати в західній частині парку Кришталевий палац.