In dit in kern uit het midden van de zestiende eeuw daterende pand brak in het najaar van 2017 een brand uit. Hoe wel deze brand snel kon worden geblust, raakten zowel het pand als de hierin aanwezige museumcollectie ernstig door de rook vervuild. Het Drostenhuis moet in zijn eerste aanleg worden gezien als een zogenaamd Hofhuis.