Konon, keindahan Candi 10 tingkat itu sempat hilang selama beberapa abad, karena terkubur debu abu vulkanik, yang diduga dampak dari letusan Gunung Merapi.
Namun, peninggalan warisan dunia tersebut dapat direstorasi ulang pada zaman pemerintah Kolonial pada tahun 1911, tepatnya saat Thomas Stamford Raffles menjabat Gubernur jenderal di Pulau Jawa.*