И подобной оценке Государственного секретаря не стоит удивляться, ибо обслуживанием огромной дворцовой усадьбы на набережной Мойки ежедневно занимались несколько десятков человек опытной вышколенной прислуги. В дворце служили более десяти бывалых лакеев и камердинеров, штат официантов, несколько швейцаров и охранников. Выезд великого князя находился в надежных руках первоклассных кучеров и опытных конюхов. Под руководством дворцового управляющего находился высококвалифицированный штат мастеров дворцовой котельни, водопроводчик, садовник с помощником и работником в оранжерее, бухгалтер и девять дворников. Их содержание обходилось великому князю почти в 11 000 рублей ежегодно, без учета наградных к праздникам, пособий, лечения, обеспечения форменной одеждой и спецодеждой на общую сумму не менее 2000 рублей ежегодно.
Разместившись в 1885 г. в собственном дворце на набережной реки Мойки, великий князь Алексей Александрович, нарушая все правила и высокие служебные распорядки, вел разгульную веселую жизнь. Тратил напропалую деньги, ухаживал за чужими женами, балеринами, наделяя их богатыми подарками. Они все очень любили великого князя и гордились его вниманием и рыцарским к ним отношением. В полном соответствии с мнением князей, современников Алексея Александровича и представителей высшего столичного общества, великий князь главным образом оставил по себе память не своими достижениями в укреплении и развитии Российского императорского флота, а как заядлый кутила, любитель веселой разгульной жизни, первоклассных обедов и особенно женщин. При этом самый красивый представитель императорской семьи Алексей Александрович действительно пользовался успехом у женщин того времени, несмотря на свои огромные габариты и вес. Правда, великий князь Александр Михайлович, подтверждая подобную характеристику князя Алексея, в своих воспоминаниях уточнял, что в поименном списке его романов «…преобладали весьма верткие дамы».
В свои довольно зрелые годы Алексей Александрович страстно увлекся удивительно привлекательной графиней Зинаидой Дмитриевной Богарне, урожденной Скобелевой – супругой герцога Евгения Максимилиановича Лейхтенбергского, состоявшего в родстве с императорской фамилией.
Влюбленный великий князь Алексей Александрович широко открыл двери своего нового дворца на Мойке герцогу Е.М. Лейхтен бергскому и его супруге графине З.Д. Богарне, которые быстро освоились в роскошных великокняжеских апартаментах, а пассия князя Алексея, Зинаида Дмитриевна, стала чувствовать себя полновластной хозяйкой дворца и вместе с великим князем изволила принимать там даже великих князей и правящую императорскую чету, вызвав у Николая II и императрицы вспышку справедливого негодования и раздражения. Алексей Александрович осыпал красавицу герцогиню неимоверно дорогими подарками, заказывая их в ювелирном доме фирмы Карла Фаберже.