Русские гарнизоны еще удерживали Вильно и Борисов, но им угрожала серьезная опасность. Против Ивана Хованского, в войске которого насчитывалось более семи тысяч человек, действовала тридцатичетырехтысячная польско-литовская армия. Русское правительство опасалось и за центральный участок фронта. Именно этим, вероятно, и было вызвано решение снова послать туда Юрия Долгорукова. «Месяца августа в 17 день велел государь сказать в Смоленск, против польских и литовских людей боярину и воеводам князь Юрью Алексеевичу Долгоруково да столнику Осипу Иванову сыну Сукину, да дьяком». Но активных военных действий на Днепре поляки не начинали, и 17 сентября «говорил Государь с бояры о посылке боярина и воеводы князь Юрья Алексеевича Долгоруково с товарищи и ратных людей как ему итти с Москвы; и приговорил посылку отложить до первого зимняго пути». Впрочем, в «наказе» значилось дополнение: «Будет вестя про воинских людей будут и прежде пути, итти и прежде пути, тотчас».
Но вести о «воинских людях» на смоленском направлении не приходили. Вся королевская армия оказалась под Вильно. В ноябре 1661 г. после продолжительной осады город пал. С остатками гарнизона в замке заперся воевода князь Мышецкий и еще много месяцев выдерживал осаду, пока не были исчерпаны все возможности к сопротивлению. Позднее он писал своему сыну: «Сидел в замке от польских людей в осаде без пяти недель полтора года, принимал от неприятелей своих всяческие утеснения и оборонялся от пяти приступов, а людей с нами осталось от осадной болезни только 78 человек».
Но и тогда Мышецкий не пожелал сдавать замок. Он заготовил десять бочек пороху, чтобы взорваться вместе с замком, но иноземные офицеры связали своего непреклонного коменданта и выдали королю. Об этой героической обороне и о самом воеводе Мышецком, который предпочел славную смерть позорному плену, мало кто знает. А ведь это еще одна героическая страница российской военной истории!
Затем король взял Минск. Остатки северной русской группировки Ивана Хованского отошли в Великие Луки. Русские гарнизоны были выбиты из крепостей Дисна и Себеж. Но война все еще шла в «литовской земле», противник нигде не приблизился к довоенной границе. В тылу королевских войск продолжал держаться русский гарнизон города Борисова.
«Большому воеводе» Юрию Алексеевичу Долгорукову так и не пришлось выступить в поход в 1661 г.: наступательный порыв польско-литовской армии явно выдыхался…
1662 г. принес новые заботы. Лазутчики из Крыма принесли известия, что крымский хан кочует со своей ордой к русским границам. И сейчас же запись от 15 января в дворцовых разрядах: Юрию Долгорукову «сказано» быть с полком в Калуге «против крымского хана и крымских людей». А через несколько дней новая запись: «Не послан, потому что подлинной вести про крымских людей не было».