Стены и башни Свенского монастыря начали строить в 1735 году одновременно с началом постройки Спасо-Преображенской надвратной церкви. Окончены строительством в 1764 году, после Успенского собора. Таким образом, середина ХVIII века явилась наиболее плодотворным периодом в завершении строительства ансамбля.
Стены построены по традиции, сохранившейся от ХII-ХIII веков. Они расположены по рельефу местности, как подсказывали соображения обороны. Контур стен в плане образует неправильный восьмиугольник с местным отступом от основной линии северной стены на 20 метров вглубь территории монастыря с целью обеспечения защиты главного входа через «святые» ворота.
По основным углам излома стен, за исключением одного, расположены шесть башен. Общая длина прясел стен за вычетом башен составляет 777 метров. Высота колеблется от 5,5 до 7 метров.
Южная башня сохранила лишь цоколь, юго-западная разрушена наполовину, северо-западная уничтожена полностью. Остальные три башни почти сохранили свой первоначальный облик.
В плане все башни имеют восьмиугольную форму. Высота от 8 до 12 метров. Стены башен выполнены из красного кирпича местной выработки на известковом растворе. Толщина от 64 до 180 см. Из таких же материалов сделаны и стены ограды. Для большей устойчивости стены ограды снабжены утолщениями-лопатками – с наружной и внутренней сторон. С внутренней стороны массив стен облегчен устройством ниш глубиной 80 см. Ниши имеют полукруглое завершение, образующее свод. В верхней части стены узкие сквозные отверстия – амбразуры – расположены через 80-90 см. Раньше стены имели дощатое двухскатное покрытие. Башни крыты железными граннокупольными крышами с ромбическим расположением листов по деревянной обрешетке.
Стена опоясывала вознесшийся над ней сложный и богатый по силуэту комплекс храмов и монастырских строений. Ее архитектурный масштаб вполне соответствовал и величественным храмам и одноэтажной застройке прилегающей деревни. Своеобразные по архитектуре башни имеют простое, но выразительное решение. Стены, обработанные лопатками с креповкой мало выступающего карниза над ними, полуциркульные окна вверху и пятиугольные ниши внизу, вот и весь декор башен. Восьмигранный купол красиво завершен декоративным восьмеричком с главкой хорошего рисунка.
Интересно также архитектурное решение ограждающей ансамбль стены с внутренней стороны. Крупный шаг широких лопаток с нишами между ними создают эффектный светотеневой убор поверхности. Использование башен было вполне мирным. Южная и юго-западная башни были приспособлены под кельи, левая предвратная была обращена в кузницу, восточная и по сей день используется как водокачка, остальные служили хозяйственными помещениями.Башни и стены восстановлены в ходе реставрационных работ 1985-1989 гг.