1720 für den Grafen von Évreux erbaut, ging das Palais an die Pompadour, dann durch die Revolution, bevor es 1805 Murat kaufte, der es prachtvoll einrichtete. Als er 1808 König von Neapel wurde, trat er es dem Kaiser ab. Joséphine wohnte dort nach der Scheidung; Napoleon arbeitete dort, wenn er der Etikette der Tuilerien entgehen wollte.
Am 21. Juni 1815 kehrte er aus Belgien zurück und stieg im Élysée ab statt in den Tuilerien — ein Zeichen, dass er sich nicht mehr ganz zu Hause fühlte. Die Repräsentantenkammer, von Fouché und Lafayette gedrängt, erklärte sich für permanent und forderte seine Abdankung; Lucien drängte ihn, die Kammern mit Gewalt aufzulösen, Davout und Carnot verweigerten sich.
Am 22. Juni unterzeichnete er die Abdankungsurkunde zugunsten seines Sohnes, der nie regieren sollte: „Mein politisches Leben ist beendet, und ich proklamiere meinen Sohn unter dem Titel Napoleon II. zum Kaiser der Franzosen.“ Tags darauf setzte die Kammer eine Regierungskommission unter Vorsitz Fouchés ein, des Mannes, der bereits mit den Bourbonen verhandelte.
Am 25. Juni verließ er den Élysée nach Malmaison, dann nach Rochefort. Unter der Restauration wurde der Palast Residenz des Herzogs von Berry; 1848 zog Louis-Napoleon Bonaparte als erster Präsident der Republik ein und bereitete von dort seinen Staatsstreich vor. Seit 1873 residieren dort alle französischen Präsidenten: Das Haus, in dem das Kaiserreich erlosch, ist das Haus, in dem die Republik wohnt.