Het museumcomplex is gegroepeerd in een aantal panden rond de zogenaamde Watersteeg. De totale oppervlakte van de gebouwen bedraagt 850 m2. De buitenruimte is ongeveer 600 m2 groot, Kortom, een openluchtmuseum in het klein.
Het museum is in 1986 geopend onder de naam Museum ‘t Vurhuus. In de jaren daarna is
het museum uitgebreid met de historische vishangen in de Watersteeg (1991). Vijf jaar later is de historische bebouwing aan de Watersteeg herbouwd waardoor het museum in een keer bijna in oppervlak verviervoudigde.
Tot slot is in 2008 het museum uitgebreid met een eigentijdse entree in een museumcafé en een informatiepunt over de Grebbelinie. In datzelfde jaar is het hele museum heringericht. Tegelijkertijd is de Watersteeg in zijn geheel bij het museum getrokken.