A megyeháza udvarán látható az egykori börtönépület, ma Sportmúzeum, a Kálváriával.
A kálvária a megye régi pallosjogának megnyilvánulása. Régen itt, ezen a téren folytak a kivégzések.
Ma hangulatos park van az udvaron.
Az épületet 1764-69 között építették, Gerl József tervei alapján. A négyzetes alaprajzú, szabadon álló épületnek ezt, az udvarra néző homlokzatát képezték ki kálváriának. A sziklákat jelző alsó felületből emelkedik ki a fal síkjából kidomborodó három kereszt. Kis, kétkarú lépcső vezet a bejárathoz, Krisztus keresztje alá.
A szocialista időkben levéltárként működött az épület.