Panství Aultmore House navrhl architekt Charles Quennell, dostavěné bylo v roce 1914 a původně mělo sloužit jako letní sídlo pro podnikatele Archibalda Merrileese, který v Rusku založil první obchodní dům M&M. Svého jmění se však byl nucený zbavit po vítězství bolševiků v ruské občanské válce v roce 1922.
Dům s několika přijímacími salony, hudebním pokojem, 11 koupelnami a sedmi podkrovními ložnicemi za druhé světové války sloužil jako zotavovna pro vojáky a v chalupách pro zahradníky na přilehlých pozemcích přespávali evakuovaní civilisté.
Mezi 70. a 90. lety minulého století za nových majitelů byla z panství nejprve dívčí škola pro zahraniční žačky a později hotel.
Dylan obrazy ze Skotské vysočiny několikrát použil ve svém díle. Například v písni Highlands na albu Time Out of Mind zpívá: Well my heart's in The Highlands, gentle and fair, honeysuckle blooming in the wildwood air (Mé srdce leží na Vysočině, něžné a půvabné, zimolez kvete ve vánku divokého lesa).
