Byens torv lå opprinnelig sør for kirken, men etter brannen i 1672 ble den flyttet til sin nåværende plass. Etter storbrannen i 1764 kjøpte Staten hele kvartalet øst for torget og oppførte «De nye Kaserne». Bygningen sto ferdig i 1787, og regnes som noe av det fineste i militær arkitektur i Norge. Tegningene ble utarbeidet i København og tilpasset lokale forhold av ingeniøroffiser Hans C Gedde. Kasernen påstås i være bygget etter det kalendariske system, med 4 fløyer, og porter, 7 utvendige hjørner, 12 piper, 52 værelser, 60 innvendige dører, 365 vinduer og 24 ruter i hvert vindu. Bygningen var i bruk som kaserne til 2002, og huser nå skolevirksomhet og diverse mindre virksomheter
13 - Færgeporten, kommisjonsgården
Den første porten mot fergestedet var bygget i tømmer, som ble erstattet av dagens port med Fredrik IV’s monogram i 1727. Fergestedet har ligget her i uminnelige tider, her har det vært overgangssted over Glomma lenge før byen ble anlagt. Fortsatt går fergen over Glomma her. Umiddelbart innenfor porten lå det fra 1700 soldatkaserner, disse brant ned i 1764, nye kaserner ble bygget i 1769, disse brant på nytt i 1830. Etter dette ble Kommisjonsgården oppført på den gamle grunnmuren, som retts- og møte
