Castle Fraser è la fortezza più grande di Midmar ed è un esempio perfetto delle costruzioni di difesa di questo periodo (1560-1636). I costruttori (i Bell e i Leiper), pur utilizzando la forma tradizionale della casa-torre, hanno creato un edificio molto originale per la cura dei dettagli decorativi. Iniziato nel 1575 e concluso nel 1636, questo castello, proprietà dei Fraser fino al XX sec., appartiene oggi al National Trust for Scotland.