Участок, на котором сейчас располагается дача Громова, был известен ещё в XVII веке, здесь шли бои со шведами во время Северной войны. Позже здесь располагалась дача сибирского губернатора Гагарина, которого в 1721 году казнили за взяточничество. После этого участок долго пустовал.

Нынешнее деревянное здание архитектор Винтергальтер построил для купца-лесопромышленника Громова в середине XIX века. Сад оформлял известнейший в своё время садовник Одинцов, благодаря ему здесь появились гроты, мостики, фонтаны и прочие прелести. Сад дачи Громова был известен не менее, чем сама усадьба, о его красоте говорил министр внутренних дел Валуев, художник Боголюбов, Чехов, который тоже нередко бывал здесь.

В советские годы здание переоборудовали под телестудию, именно отсюда в 1938 году прошла первая в СССР опытная телетрансляция. Летом 2014 года на даче прошло собрание, посвящённое планам по «реинкарнации» этого места. Активисты Петроградского района планируют создать здесь креативное пространство «Центр искусств», где будут проходить лекции, мастер-классы, экскурсии, детские мероприятия.

В 2020 году завершился реставрационный ремонт.