Arealet, der i dag omfatter Livgardens Kaserne og Rosenborg Eksercerplads i det centrale København, har været militært område siden 1786. Men allerede før Den Kongelige Livgarde rykkede ind var arealet i kongelig brug. Christian 4. fik anlagt en krydderihave og et destillérhus (1606-1648), Frederik 3. fik anlagt en ringridningsplads (1648-1670), Christian 5. fik anlagt et lystkvarter med Pommeranshuset og Lysthuset med de fire gyldne Knapper (1670-1699), og Frederik 4. et orangeri med tilhørende parterrehave (1699-1721) og Laurierhuset med parterrehave (1721-1785). Lysthuset med de fire gyldne Knapper/Orangeriet/Laurierhuset blev i årene 1785-1786 ombygget til Livgardens Kaserne og parterrehaven blev til Rosenborg Eksercerplads. I årene 1845-1846 forhøjedes kasernebygningen med en etage og mansard – til sit nuværende udseende.

Den Kongelige Livgarde har benyttet Livgardens Kaserne siden 1786, som udgangspunkt for vagttjenesten ved de kongelige slotte og palæer – med undtagelse af to perioder. Under koleraepidemien i 1853 blev kasernen stillet til rådighed for sundhedsmyndighederne og fra den 29. august 1943 til 7. maj 1945 var kasernen besat af den tyske værnemagt.

Kasernebygningen opdeles i Gothersgadepavillonen, Gothersgadefløjen, Midterpavillonen, Rosenborgfløjen. Rosenborgpavillonen, Rosenborglængen og Staldbygningen. På eksercerpladsen findes en træbygning med cykelskur og affaldsrum, m.v., et gult krudthus fra 1914, beskyttelsesrum, gitterport med skilderhus samt diverse monumenter. Den samlede bygning mod Øster Voldgade er ca. 230 meter lang, heraf udgør hovedbygningen ca. 170 meter. Eksercerpladsen måler ca. 200 × 150 meter. Livgardens Kaserne er tjenestested for Vagtkompagniet, Musikkorpset og Tambourkorpset m.fl. Kasernen er fredet som bygningsværk.

Udover Livgardens Kaserne anvendte Den Kongelig Livgarde Jægersborg Kaserne 1909-1943. Fra 1945-1985 Sandholmlejren og siden 1985 Garderkasernen i Høvelte. På Garderkasernen i Høvelte (Allerød kommune) 25 km. nord for København findes I og II Livgardebataljon, chef Livgardes stab og andre støttefunktioner med depoter og værksteder mm.