Det første Graasten var et lille jagtslot, opført i midten af 1500-tallet. Efter slottet nedbrændte i 1603 opførtes et nyt slot, der højst sandsynligt har ligget hvor den nuværende Graastens sydfløj er placeret.
Kort før år 1700 byggede storkansler Frederik Ahlefeldt et vældigt barokslot, der imidlertid brændte i 1757. Det eneste der blev reddet var slotskirken. Det nuværende Graasten Slot stammer således fra 1759, hvor en ny sydfløj blev opført og fra 1842 hvor midterbygningen blev bygget.
I 1935 blev brugsretten til slottet overdraget til daværende Kronprins Frederik og Kronprinsesse Ingrid, senere Kong Frederik IX og Dronning Ingrid. Dronningen besad en stor interesse for blomster og var personligt inde over planlægningen af blomsterhaven ved Graasten Slot frem til hendes død i år 2000. Interessen for blomster blev videreført af hendes datter H.M. Dronning Margrethe II.
Der er ikke offentlig adgang for publikum i slottets bygninger, med undtagelse af Graasten Slotskirke, der har særlige åbningstider.
Under nytårstalen i 2023 meddelte Dronning Margrethe II, at hun abdicerede, og den 14. januar 2024 fik Danmark en ny konge og dronning i form af Kong Frederik X og Dronning Mary.
Når kongefamilien har residens på Graasten Slot er området lukket for offentligheden og der er således ikke adgang for publikum i Graasten Slotshave- og Kirke; Slotskirken er dog stadig åben i forbindelse med gudstjenester og sommerens aftensang.
Graasten Slotshave & Slotskirke vil være lukket fra den 1. juli (i forbindelse med klargøring til den royale families sommerophold). Slotskirken er dog åben ved gudstjenester og aften fællessang.
Slotshaven er åben igen fra mandag den 19. august, ved 11-tiden. Slotskirken er først åben den 24. august 2024.
Den 9. juli kl. 16.00 vil der være officiel modtagelse af H.M. Kong Frederik X og H.M. Dronning Mary på Torvet i Gråsten ved borgmester Erik Lauritzen. Hvis vejret tillader det, vil Kongeparret, efter den officielle modtagelse, gå til fods fra Torvet via Slotsgade til Gråsten Slot. Kongeparret afrejser lørdag den 20. juli og herefter er H.M. Dronning Margrethe II i sommerrecidensen.
Vagtafløsning
Når slottet er beboet, går et royalt splitflag til tops i stangen på slottets klokketårn og den Kongelige Livgarde stiller op til bevogtning. Hver dag foregår der vagtafløsning af den Kongelige Livgarde. Vagten udgår fra Det Gule Palæ, Ahlefeldtvej 5, hvor garderne stiller op. Under ledsagelse af to tambourer, marcheres der herfra kl. 11.43 gennem Gråsten via Borggade, Torvet og Slotsgade til slottet, hvor vagtafløsningen sker ved vagtbygningen kl. 12.00. Når Kong Frederik d. X er i recidens vil marchen om fredagen foregå under ledsagelse af Den Kongelige Livgardes Tambourkorps og der afholdes et stort vagtskifte i slotsgården.
Fredags koncert
Vil blive afholdt i slotsgården i forbindelse med vagtskiftet i den periode hvor kongeparret opholder sig på slottet. Første gang vil være fredag den 12. juli 2024. Sidste fredagskoncert er den 19. juli.