A pedra angular foi lançada para uma residência presidencial na recém-designada capital de Washington. Em 1800, o presidente John Adams se tornou o primeiro presidente a residir na mansão executiva, que logo ficou conhecida como "Casa Branca" porque seu freestone cinza-branco da Virgínia contrastava notavelmente com o tijolo vermelho de prédios próximos.
A cidade de Washington foi criada para substituir a Filadélfia como capital do país por causa de sua posição geográfica no centro da nova república existente. Os estados de Maryland e Virgínia cederam terras ao redor do rio Potomac para formar o distrito de Columbia e os trabalhos começaram em Washington em 1791. O arquiteto francês Charles L'Enfant projetou o layout radical da área, cheio de dezenas de círculos, avenidas cruzadas e abundantes parques. Em 1792, começaram os trabalhos no edifício neoclássico da Casa Branca, na 1600 Pennsylvania Avenue, sob a orientação do arquiteto irlandês-americano James Hoban, cujo design foi influenciado pela Leinster House em Dublin e por um esboço do edifício de James Gibbs ' Livro de Arquitetura. O presidente George Washington escolheu o site.
Em 1º de novembro, o Presidente John Adams foi recebido na mansão executiva. Sua esposa, Abigail, escreveu sobre o novo lar: “Oro para que o céu conceda as melhores bênçãos a esta casa e a tudo o que daqui por diante a habitar. Que ninguém, exceto homens sábios, possa governar sob este teto!
Em 1814, durante a Guerra de 1812, a Casa Branca foi incendiada juntamente com o Capitólio dos EUA por soldados britânicos em retaliação pela queima de prédios do governo no Canadá por tropas dos EUA. O prédio incendiado foi posteriormente reconstruído e ampliado sob a direção de James Hoban, que acrescentou terraços leste e oeste ao prédio principal, juntamente com um pórtico sul semicircular e um pórtico norte com colunatas. As paredes de pedra manchadas de fumaça eram pintadas de branco. O trabalho foi concluído na Casa Branca na década de 1820.
Grandes restaurações ocorreram durante a administração do presidente Harry Truman, e Truman viveu do outro lado da rua por vários anos em Blair House. Desde 1995, a Pennsylvania Avenue entre a Casa Branca e a Lafayette Square está fechada ao tráfego de veículos por razões de segurança. Hoje, mais de um milhão de turistas visitam a Casa Branca anualmente. É o edifício federal mais antigo da capital do país.
