Grad je bil predvsem v lasti rodbine Herbersteinov in na gradu se je zanesljivo mudil tudi Herberstein. To je bil diplomat, ki je že v 15., 16. stol. deloval v Moskvi. Prav Herbersteini so imeli grad v lasti do druge svetovne vojne, potem je pa doživel žalostno usodo številnih slovenskih gradov.