Fältmarskalken Rutger von Ascheberg fick år 1661 Dynge hus och 34 andra bohuslänska gårdar i förläning för sina krigiska bedrifter. Sten från borgen blev till terrasserad grund när han år 1669 lät bygga närbelägna Gullmarsbergs säteri. En pietetsfull ombyggnad i mitten av 1900-talet återgav huvudbyggnaden dess 1600-talsprägel. Därför blev den också år 1979 förklarad som byggnadsminne. Säteriet är privat egendom.