La Casa Blanca se hizo blanca por primera vez porque en 1798 se utilizó un lavado de cal a base de cal cuando se completaron sus paredes. El lavado de cal ayudó a proteger la piedra porosa de la Casa Blanca de la congelación.
No se sabe explícitamente por qué la Casa Blanca se pintó de blanco más tarde, pero bien podría ser que, a medida que se desvaneció la cal, comenzó a verse sucia.
La Casa Blanca comenzó como un apodo para la residencia del presidente a principios de la historia estadounidense. En 1812, el congresista Bigelow escribió una carta a un colega, refiriéndose al hecho de que llaman a la mansión del presidente "la Casa Blanca". En 1901, Theodore Roosevelt convirtió a la Casa Blanca en el nombre oficial de la casa del presidente.