De binnenplaats van het kasteel, een voormalige patriciërswoning, bestaat nog steeds uit het zogenaamde Romaanse Huis (rond 1200), het voormalige herenhuis (1559) en de Daelenpoort (1551). Het Romaanse Huis is het overgebleven deel van een oorspronkelijk groter huis. Het is een van de oudste bewaard gebleven wereldlijke woongebouwen in Westfalen. Het statige laatgotische renaissance herenhuis is aan de buitenkant vrijwel onveranderd gebleven, maar het interieur is in de loop van de geschiedenis meerdere keren verbouwd. Boven het gedeelte met de kelder zijn in de feestzaal, de zogenaamde ridderzaal, bezienswaardige stucreliëfs uit de tijd van de bouw bewaard gebleven. Ze werden in 1939 toegevoegd door de beeldhouwer Wilhelm Wulff.
De Daelenpoort ontleent zijn naam aan de vroegere eigenaars, de familie von Dael. Het stadshistorisch museum op de binnenplaats van het kasteel toont tentoonstellingen over de stads- en kerkgeschiedenis, kopergravures van Heinrich Aldegrever (1502 tot ca. 1555) en de tentoonstelling "Het dagelijks leven in de middeleeuwen" op verschillende verdiepingen. In de afdeling prehistorie en vroege geschiedenis is ook de beroemde "granaatschijffibula" uit de vroegmiddeleeuwse begraafplaats aan de Lübecker Ring te zien. De laatste abdisstoel uit het Sint-Walburgisklooster, vondsten uit het Paradiklooster en andere schatten worden ook tentoongesteld. Tegenwoordig wordt de ridderzaal ook gebruikt voor recepties van de stad Soest en als trouwzaal.
Het Burghofmuseum Soest is een attractie van WasserEisenLand - Industriekultur Südwestfalen.