La Maison-Blanche et ses jardins couvrent environ 7,3 hectares. La Résidence exécutive et les deux ailes séparent deux jardins : un jardin au nord nommé North Lawn (pelouse Nord) donnant sur Pennsylvania Avenue et un grand jardin au sud nommé South Lawn (pelouse Sud).

Avant la construction du portique nord, la plupart de évènements publics avaient lieu sur la pelouse au sud. C'est Jefferson qui est à l'origine de l'aménagement paysager et du choix des plantations sur les pelouses du sud et du nord. Il prévoyait notamment de planter de grands arbres afin de rendre la maison invisible depuis la Pennsylvania Avenue. Dans la seconde moitié du XIXe siècle, des serres de plus en plus grandes ont été construites à l'ouest de la maison, à l'emplacement de l'actuelle aile Ouest. À cette époque, la pelouse nord était agrémentée de massifs de fleurs en terrasse.

Bien que les jardins de la Maison-Blanche aient accueilli bon nombre de jardiniers au cours de son histoire, la composition générale date de 1935 et a été conçue par Frederick Law Olmsted Jr., sous le mandat du président Franklin D. Roosevelt.

Sous l'administration Kennedy, le Rose Garden (« La Roseraie »), qui borde la colonnade Ouest, a été redessiné par Rachel Lambert Mellon. La petite pelouse centrale nouvellement créée ouvre sur le rez-de-chaussée de l'aile Ouest. Elle accueille par beau temps les conférences de presse ou d'autres évènements présidentiels.

La colonnade Est, quant à elle, est bordée par le Jacqueline Kennedy Garden, du nom de celle qui en est à l'origine. Le week-end du 23 juin 2006, un orme d'Amérique centenaire a été déraciné au nord du bâtiment, pendant l'une des nombreuses tempêtes qui ont balayé la côte orientale du pays (provoquant d'importantes inondations). Cet orme apparaît au verso des billets américains de 20 dollars. Il semble que cet arbre ait été planté entre 1902 et 1906, sous l'administration de Theodore Roosevelt. Les jardins accueillent également de très anciens