На некоторое время военные действия переместили далеко от Невеля, в котором в это время находился русский гарнизон и рота в 44 человека невельской шляхты во главе с ротмистром Б. Камаром и поручиком С. Ясимонтом."
Вмешательство в войну Швеции способствовало временному примирению России и Речи Посполитой. После переговоров 1655 г. Военные действий на Невельщине прекратились, а в 1656 г. было заключено двухгодовое перемирие.
В связи с непригодностью укреплений города, царь приказал в июле 1656 г. построить в Невеле новый острог. Начались интенсивные работы, но они проводились не качественно. После поражения в октябре 1661 г. войск воеводы Хованского под Кулишками их неразбитые части отошли в Невель. Царь приказал воеводе Плещееву "на Невле от прихода польских и литовских людей жить с великим бережениьем, а городовые и острожные крепости худые рухомые места, которым без поделки быть нельзя, поделать служилыми и жилецкими людьми". В город шли люди с " женишкаими и детишками", всей волостью привозились запасы хлеба, "конские кормы, сено, солома". Был наказ " по городу и по острогу, и по воротам, и по башням, и по стенам днём и ночью сторожи держать крепкие."
По Андрусовскому перемирию 1667 г. Невель оказался в составе России.
Невель в 1668 - 1772 гг
В 1678 г. Невель был передан в состав Речи Посполитой. Сейм подарил гетману Яношу Радзивилу "староство невельское с замком и городом в вечное и потомственное владение". А он передал город своей дочке Королине-Ядвиге, бывшей замужем за графом Нейбргским и Рейнским.
В 1687 г. сильный пожар почти уничтожил укрепления в замке и городе. В следующем году они были частично отстроены.
Дальнейшая история Невеля связана с Северной войной 1700 - 1721 гг. Это война коалиции европейских стран в составе России, Дании, Саксонии с участием Речи Посполитой, Пруссии, Ганновера против Швеции за владычество в Балтийском море. Северная война не принесла городу больших потерь и разрушений. Военные действия тут начались только в 1704 г., когда через Невельщину проходили русские войска.
В 1705 г. в городе проездом по пути в Полоцк останавливался Пётр І. Он ознакомился с системой невельских рек и озёр и предложил соединить р. Ловать и р. Зах. Двину через их притоки р. Еменку и р. Оболь. Так Пётр І писал в 1711 г. невельскому мещанину Писареву: "По получении сего письма поезжай прямо на Великие Луки и как там в Луках, так в Невле осведомся о коммуникациях до Ловати с Двиною, ибо в бытность мою там я слышал от купцов, что в полную воду по некоторым рекам можно ездить по Западной Двине и Ловати". В 1850 - ых гг. в район Невеля для исследования местности была послана комиссия, которая пришла к выводу, что "издержки по устройству этого водного сооружения не будут соответствовать той пользе, которая от прорыва канала может последовать".
В 1744 г. Невель принадлежал Радзивилам несвижской линии.
14 ноября 1762 г. король Речи Посполитой Станислав Август Понятовский подтвердил Невелю магдебурское право. Городу был пожалован новый герб - щит, поделенный на две части горизонтальной полосой. В нижней части изображён всадник наподобие герба Великого княжества Литовского, а в верхней - половина общероссийского герба, двуглавого коронованного орла.
Последней датой в истории г. Невеля этого периода стало 25 июля 1772 г. В этот день город окончательно был передан в состав России в результате первого раздела Речи Посполитой между Россией, Австрией и Пруссией.