Здание дворца, изначально принадлежавшее русскому дипломату, государственному деятелю и канцлеру Российской империи графу Михаилу Воронцову, отличается богатой отделкой интерьера и фасадов, красивой лепниной и пышной, золочёной резьбой. От Садовой улицы Воронцовский дворец отделён массивной чугунной оградой.

Интересно, что граф Воронцов хоть и был человеком весьма обеспеченным, всё же вынужден был отказаться от участия в строительстве, так как здание с десятками парадных залов и шикарными интерьерами оказалось слишком уж затратным предприятием. В итоге Воронцовский дворец стал принадлежать российской казне, а спустя некоторое время в нём расположился Мальтийский орден — старейшее религиозное сообщество римско-католической церкви. В начале XIX века архитектор Джакомо Кваренги устроил во дворце церковь Рождества Святого Иоанна Предтечи, а со стороны сада по его же проекту к главному корпусу дворца пристроили Мальтийскую капеллу.

Начиная с 1955 года во дворце располагалось Суворовское военное училище, в стенах которого грызли гранит военной науки будущие российские офицеры. В 2017 году во дворце временно поселились воспитанники [Нахимовского училища](https://kudago.com/spb/place/nahimovskoe-voenno-morskoe-uchilishe/). В 2019 году в здание переехала судебная инстанция.