Das Schloss Weizern ist bereits 1257 und 1291 im Zusammenhang mit Berhtold der Wizzenaer und Cunrad de Wizenaer, einem hier ansässigen Ortadel erwähnt. Wo dieses Niederadelsgeschlecht, das vermutlich in Diensten der Welfen stand, genau residierte, bleibt unklar.

Mitte des 14. Jhdts. verleibte man die winzige Ritterherrschaft der Herrschaft Eisenberg ein.

1467 werden hier anlässlich einer Herrschaftsteilung neben zwei Hofstätten auch eine Taverne und ein Tanzhaus, weiterhin das (niedere) Gericht erwähnt. Um 1600 berichtet eine Steuerbeschreibung, dass der Amtmann Christa Haar(y) soeben einen neuen Ambthoff erbaut habe, der aus einem Haus, einem Frühgarten, einem Kräutergarten, einem Baumgarten, einem Anger etc. bestehe.