Мраморный дворец — это памятник архитектуры раннего классицизма, который строился с 1768 по 1785 год итальянским архитектором Антонио Ринальди по заказу императрицы Екатерины II. В облицовке фасадов и отделке интерьеров использовался натуральный мрамор разных сортов. Внутри здания можно увидеть уникальные интерьеры, плафоны и скульптуры, в частности работы знаменитого скульптора XVIII века Федота Шубина.
В первой половине XIX веке интерьеры были перестроены архитектором Александром Брюлловым. Дворец был резиденцией великих князей, среди которых — правнук Екатерины II, генерал-адмирал Константин Николаевич Романов, а позднее его сын — Константин Константинович, поэт и переводчик, писавший под псевдонимом «К. Р.» Его апартаменты на первом этаже дворца сохранились до наших дней и доступны к посещению с индивидуальной экскурсией по предварительной записи.
В настоящее время в залах второго этажа размещаются постоянная экспозиция «Коллекция братьев Ржевских», где представлены произведения искусства XVIII–XX веков (картины, скульптуры, предметы декоративно-прикладного искусства), а также «Музей Людвига в Русском музее». В 1994 году немецкие коллекционеры Петер и Ирене Людвиг передали в дар Русскому музею коллекцию из 118 произведений российских и зарубежных художников второй половины XX в. , среди которых — Пабло Пикассо, Энди Уорхол, Рой Лихтенштейн. Собрание музея пополняется новыми произведениями благодаря дарам и приобретениям.
В залах второго и третьего этажей регулярно проводятся временные выставки искусства XX–XXI веков. В Белом зале проходят концерты и спектакли.