Funkcję ministra spraw zagranicznych pełnił do 1860 roku, po czym był do 1863 ministrem kultury i sztuki. W ostatnich latach przed śmiercią znany z sympatii do liberalnych reform Walewski był marszałkiem Narodowego Zgromadzenia Ustawodawczego, oraz zajmował się sprawami prawnymi, m.in. ochroną praw autorskich dla literatów. Na początku roku 1868 został wybrany rzeczywistym członkiem Akademii Sztuk Pięknych.
Po wycofaniu się z życia politycznego Walewski postanowił zająć się rolnictwem w nowo zakupionym majątku Etiolles (niegdyś własność męża markizy de Pompadour). Wczesną jesienią 1868 roku pojechał z żoną i córką Ireną do Niemiec po zakup maszyn rolniczych. Musiano z granicy zawrócić do Strassburga, gdyż hrabina Anna Maria nie czuła się dobrze. W hotelu w tym mieście córka znalazła ojca umierającego w fotelu, rażonego apopleksją. Po paru minutach już nie żył. Został pochowany na cmentarzu Père-Lachaise.
Potomkowie Aleksandra Aleksander Walewski ożenił się 1 grudnia 1831 w Londynie z Catherine Caroline Montagu (ur. 1 grudnia 1808 w Londynie, zm. 30 kwietnia 1834 w Paryżu), córką hrabiego Sandwichu Jerzego Jana (George John;