Pomník se ale věčným nestal. Poté, co Dittrich mladší zemřel, přišla krize, druhá světová válka a následně odsun pohraničních Němců. Kvůli majetkoprávním vztahům hrobku nezachránila ani změna režimu po roce 1989, a dokonce ani rok 2007, kdy bylo mauzoleum prohlášeno národní památkou.
