Muséet ligger i idylliske omgivelser, i Gamle Sorenskrivergaarden. Det har vært sorenskrivergård på stedet siden 1856. Den første brant ned ved forrige århundreskifte. I 1902 gikk Justisdepartementet ut med en arkitektkonkurranse. Denne skulle etter planen munne ut i en prototyp for framtidige sorenskrivergårder i Norge. Konkurransen ble vunnet av en ung norsk arkitekt, Karl Guettler, som var bosatt i Stockholm. Imidlertid var han for ung til å forestå oppføring av gården, slik at det ble nr. 2 som fikk den oppgaven. Vinnerpremien var kr. 600. Gården stod ferdig 15. mars 1904, men ble nesten 4 ganger dyrere enn kalkulert. Derfor ble det bare én slik vakker sorenskrivergård i Norge.