Het Rijssens Museum bevindt zich in de statige Havezate De Oosterhof, in de Rijssense volksmond ook wel ‘Het Kasteel’ genoemd. Een havezate is een versterkt huis, hofstede, hof of hoeve. Oorspronkelijk was het een benaming voor een grote boerderij met land. De Oosterhof wordt voor het eerst genoemd in 1324. Het is dan nog een boerderij en, onderdeel uitmakend van een schultengoed. Een schulte is een herenboer.