Il massiccio torrione è il nucleo originario del castello ed è del XII-XIII secolo; le altre costruzioni, comprese le piccole torri cilindriche, furono aggiunte nel Seicento dai proprietari, i vescovi di Bressanone. Nel complesso, da poco restaurato, è allestito il Museum ladin Ciastel de Tor, incentrato sulla storia e la cultura dei ladini delle Dolomiti.