Um 1300 hatte die Stadt im Wesentlichen ihre Position als Zentrum des „Landes Schwaan“ ausgebaut und gefestigt, war Sitz einer Vogtei des Landesfürsten, besaß Marktrecht und die kleine Gerichtsbarkeit.
Das an Stelle der Burg errichtete Schloss, in Urkunden als „Slot“ oder „festes Hauß“ bezeichnet, muss ein stattlicher Bau mit mehreren Türmen gewesen sein, der durch einen Schlossgraben von der Stadt getrennt war. Abgebildet ist es auf der Vicke-Schorler-Rolle, die 1578-1585 angefertigt wurde. Schwaan besaß zum Schutz vor Eindringlingen einen Wall, einen Graben und drei Stadttore.
Die Zeichnung mit dem Titel: „Daß Hauß Schwaan“ ist aus der Uni-Bibliothek Rostock.