Der relativ freistehende Berg Hayn" erhebt sich fast direkt hinter der Kirche von Liebschwitz. Mangels Ausgrabung stützt sich die Annahme, dass sich hier eine Burganlage befunden hat, vor allem auf die Topografie des Geländes und den Flurnamen. Auf der Kuppe des Berges befinden sich zwei markant hervorstehende Hügel mit Spuren, die auf eine ehemalige Befestigung in Form von Wällen und Gräben hinweisen. In ihrem Bereich liegen an mehreren Stellen Grauwackebrocken, die vom Inneren eines Walles stammen könnten. Die Anlage wurde bislang als mittelalterliche Burg gedeutet. Bau und Umfang schließen aber nicht aus, dass sie aus ur- und frühgeschichtlicher Zeit stammen könnte.