Skaarupgaards hovedbygning er en lav, trefløjet bygning. Sidefløjene er delvist af bindingsværk og er muligvis ældre end hovedfløjen. Bygningens alder en ukendt, men den er muligvis opført af Peder Hansen Milling i starten af 1800-tallet.
I 1877 blev bygningen hærget af en brand, hvorefter O. L. Bang foretog en gennemgribende restaurering. Bang anbragte da sit våben i en lav fronton over hovedindgangen. Bygningen blev moderniseret omkring 1970'erne af N. S. Høm.
I 2013 fremstår bygningen med grundmurede gavle, et muret gesimsbånd, kalkede mure og saddeltag. Mod gården findes en nyere frontkvist med balkon.

Umiddelbart syd for hovedbygningen ligger en trelænget avlsgård, hvis længer åbner sig mod hovedbygningen i nord.
Skaarupgaards trelængede avlsgård fra 1800-tallet er opført i grundmur med fast tag.
Fredningsstatus 2013: Avlsgården er ikke fredet. 

En landskabelig have med en mindre sø tilhører Skaarupgaard.

Link: OVERSIGT