За усадебным особняком граф А.И. Шувалов обустроил скромный регулярный сад. Краевед А.А. Иванов в своей книге
«Дома и люди» приводит фрагмент аксонометрического плана Петербурга 1760–1770 гг. Сент-Илера – И. Соколова, на котором хорошо виден дом графа. По описанию А.И. Иванова, на аксонометрическом плане Петербурга 60–70 годов XVIII столетия так выглядит дом А.И. Шувалова: «Двухэтажный особняк с декоративной балюстрадой на крыше и прочими барочными изысками, отгороженный от набережной красивой узорчатой решеткой…»
Граф Александр Иванович Шувалов обосновался в своем особняке с супругой и единственной дочерью Екатериной. Ему довелось служить двум императрицам – Елизавете Петровне и Екатерине Алексеевне и одному императору – Петру Федоровичу. В 1761 г. Петр III произвел его в генерал-фельдмаршалы и пожаловал 2000 крепостных крестьян. В Верейском уезде, в селе Косицы, граф возвел усадьбу с ухоженными угодьями.
Проходили годы, Александр Иванович старел, появились различные хвори, и в 1762 г. он обратился к императрице Екатерине II с прошением об увольнении с государственной службы по собственному желанию. Его просьбу удовлетворили, и он с супругой и дочерью покинул столицу и уединился в своем поместье.
Участок и дом на набережной Мойки в 1764 г. граф продал президенту Юстиц-коллегии сенатору И.И. Дивову. Единственная дочь графа А.И. Шувалова – Екатерина Александровна – удачно вышла замуж за Гаврилу Ивановича Головкина, внука российского канцлера. В день коронования императора Александра Павловича Екатерина Александровна жалуется в придворный чин – статс-дамы и награждается орденом Св. Екатерины. Ее двое детей – Алексей и Елизавета – скончались бездетными и свое немалое наследство завещали роду Шуваловых.
В 1762 г. именным указом императрицы Екатерины Алексеевны петербургский обер-полицмейстер барон Николай Андреевич Корф повышается в должности до главного начальника над полициями всех городов Российской империи. Естественно, управление делами петербургской полиции отходило как бы на второй план. В данной ситуации новому высокому начальнику требовался помощник, поэтому в своем указе Екатерина II тогда учла это: «В Санкт-Петербурге одному генералу Корфу за положенными на него разными делами сию многотрудную должность несть весьма тягостно; для того особопризнанного к той должности им, генералом Корфом, статского действительного советника Ивана Дивова всемилостивейше жалуем в генерал-полицмейстеры с чином и жалованием тайного советника; состоять же ему в точном ведении и дирекции нашего генерала Корфа».