Das Schloss Wolfstein wurde um 1200 höchstwahrscheinlich von Fürstbischof Wolfger von Erla errichtet. Es diente als Verteidigungsbastion gegen Konkurrenten. Zudem schützte die Burg den damals mit Sicherheit schon bestehenden Handelsweg nach Böhmen, der unmittelbar an der Burg vorbeiführte. Die Burg Wolfstein förderte auch den Landesausbau in Richtung Böhmen. Sie bildete die Keimzelle für den Ort Freyung. Die ursprüngliche Anlage war kleiner als die heutige und hatte noch einen stärkeren Burgcharakter.