Великий князь тем временем записывает в дневнике: «В 9 с четвертью был вечер у Мамб, все почти играли в карты, я сочинял стихи и страшно скучал и грустил по М. Э., которая не была приглашена».
Однажды Шереметев стал свидетелем сцены, которую живо описывает в воспоминаниях: «Между двух гостиных, в дверях, случайно очутился я около канцлера князя Горчакова, княжны Мещерской и в. к. Александра Александровича. Я вижу, как последний нагнулся к княжне и что-то говорил ей на ухо. До меня долетает и полушутливый, полусерьезный ответ: “Молчите, Августейшее дитя”. И тут же князь Горчаков вступил в разговор с обычною своею развязностью, а я отошел от них подальше. Только тут заметил я особенность отношений, о которых до того не догадывался».
Какое-то время Александр тешил себя надеждой, что эта любовь может иметь счастливое окончание, он записывает в дневнике: «Я только и думаю теперь о том, чтобы отказаться от моего тяжелого положения, и, если будет возможность, жениться на милой М. Э. …» и «…будет лучше, если я откажусь от престола. Я чувствую себя неспособным быть на этом месте, мне страшно надоедает все, что относится до моего положения. Я не хочу другой жены, кроме как М. Э.»
Позже записи в его дневнике меняются. 19 июня 1865 г. он записывает свой разговор с княжной, когда они случайно встретились на так называемой Английской дороге, ведущей из Царского Села в Павловск. Великий князь был верхом, Мария ехала в открытом экипаже, с попутчицей — старой гувернанткой. Внезапно пошел дождь, путники укрылись под деревом. «Я сказал ей, что мы больше не можем оставаться в таких отношениях, как были раньше, — пишет Александр, — что во время вечерних собраний мы не можем сидеть вместе, потому что это только дает повод к разным нелепым толкам и сплетням. Княжна сказала, что совершенно с тем согласна, что она в отчаянии, и не знает, что делать… Как мне ни грустно было решиться на это, но я решился. Вообще, в обществе будем редко говорить с нею, а если придется, то — о погоде или каких-нибудь предметах более или менее неинтересных. Но наши дружеские отношения не прервутся, и если мы увидимся просто, без свидетелей, то будем всегда откровенны».