Чем хуже шли дела в Белоруссии и Литве, тем сильнее становилось в Москве желание мира. В 1661 году попытка царя задержать военные действия мирными переговорами не удалась. Съезд посольский, обещанный в октябре, не состоялся. В марте 1662 года новый посланник царский, стольник Нестеров, приезжал в Варшаву с тем же предложением перемирия на время посольских съездов. Сенаторы отвечали, что если царь уступит королю Киев, Переяславль, Нежин и все черкасские города Заднепровской Путивльской стороны, также Полоцк, Витебск, Динабург, Борисов и Быхов, то король велит заключить перемирие и удержать войска месяца на два или на три для посольского съезда, которому быть на Поляновке. Нестеров отвечал, что в два или три месяца уполномоченные не успеют съехаться; для перемирия на два или на три года он уступит королю Борисов, о других же городах ему говорить не наказано; потом согласился уступить еще Динабург: но паны объявили ему решительно, что перемирия не будет, а ратные люди отведутся на 15 миль от того места, где будет назначен съезд уполномоченных; сенаторы прибавили, что если постановлять договор о перемирье, то надобно посылать к крымскому хану, что потребует много времени; без пересылки же с крымским ханом перемирья заключить нельзя. Нестеров отвечал на это: «Удивительно, что королевское величество и вся Речь Посполитая в государстве своем без ведома искони вечного христианского неприятеля крымского хана сделать ничего не можете и не смеете; а крымский хан между христианскими государствами никогда покою не пожелает, и о том королевскому величеству крымского хана спрашивать не доведется». Паны отвечали: «Крымский хан нам товарищ, да и король и вся Речь Посполитая перемирья заключить не хотят». На это Нестеров сказал: «С которой стороны перемирью не быть, с той стороны и правде не быть». Но царские уполномоченные – боярин князь Никита Иванович Одоевский, боярин князь Иван Семенович Прозоровский, думный дворянин Афанасий Лаврентьевич Ордин-Нащокин и думный дьяк Алмаз Иванов уже отправились в Смоленск, куда к ним высланы были и польские пленники – гетман Гонсевский, полковники Неверовский и Обухович с товарищами, всего 212 человек, потому что за этих пленников король обещал отдать окольничего князя Осипа Щербатого, стольников князей Семена Щербатого и Григорья Козловского, Ивана Акинфова; а гетман Гонсевский обещал государю, что за него король даст кроме означенных пленников еще князя Петра Хованского. Гонсевского немедленно отпустили из Смоленска в Шклов; но русские пленники не были возвращены, потому что Потоцкий, Любомирский, Чарнецкий, на долю которых они достались, не хотели отпустить их без окупу. Между тем из Борисова пришла весть, что съестные запасы все вышли и немцы сильно скучают; в Москве признали невозможным поддерживать долее этот город и послали приказ воеводе его Хлопову покинуть Борисов. 9 июля Хлопов исполнил приказ, вышел из города со всеми ратными людьми, пушками, запасами и казною.