白宫坐落在美国首都华盛顿宾夕法尼亚大街1600号，南邻爱丽普斯公园，北接拉斐特广场，与巍然屹立的华盛顿纪念碑东西相望。白宫的基址是由第一届总统乔治·华盛顿选定的，由爱尔兰后裔建筑师詹姆士·霍本设计。但华盛顿总统未能目睹其完成即逝世，因此最先使用此官邸的乃是美国第二任总统约翰·亚当斯。
1800年春在白宫接近完工之时，当时的美国总统亚当斯迁入白宫，白宫从此成为历届美国总统的官邸。整个白宫建筑物的南北两面各有一条壮观的爱奥尼亚式的门廊，而其四周则绕以花园和草坪，庄重而美丽的白宫既雍容华贵又落落大方，是近代建筑的杰作。
白宫的正门位于一层的北面，一进门即可见大理石结构的门厅、内厅以及蓝厅、红厅和绿厅，其命名源于各自装修的主色调。绿厅是一个小型的画室，蓝厅和红厅则是休息室。东大厅是白宫中最大装饰最为豪华气派的厅堂，是美国总统举行宣誓就职仪式、记者招待会、酒会、圣诞舞会的场所。国宴厅是白宫第二大厅，里面有华丽的装饰和精致的餐具。
厅中的壁炉上方刻有美国第二任总统约翰·亚当斯一句名言：我祈祷上苍赐福于这座宅邸，以及所有来日居于此间的人，愿白宫主宰者皆为诚实明智之人。
主楼二层为总统全家居住的地方，白宫的西翼被一片绿树掩映，内侧的椭圆形大厅是总统办公室，据说总统的办公室是用一艘失事海船的木料做的，是1880年维多利亚女王送给海斯总统的礼物，一直延用至今。桌上有一句座右铭："这里要负最后责任"。
白宫还有"肯尼迪夫人花园"和"*瑰园玫**"两个庭园，白宫有很多收藏品像金银器皿、瓷器等。一层的国会图书馆有两幅1821年绘制的印第安首领的画像，描述了当时的美国总统为了开发西部，邀请印第安首领到东部大城市访问谈判的场面。