В километре от деревни Пустынки находится уникальный памятник архитектуры XIV века – Успенский монастырь. Основателем обители является сын великого князя Ольгерда Лугвень, который с крещением принял имя Симеон. 

Существует легенда, согласно которой десятый сын Ольгерда стал терять зрение. Спустя некоторое время Лугвеню приснился сон, в котором незнакомый старец сообщил наследнику великого князя, что исцеление можно получить от пустынского источника. Симеон долго не мог найти чудотворный источник, но когда святое место было найдено, князь не замедлил умыть в нём лицо. После этого к нему вернулось зрение. Кроме того, в липовом бору возле источника было явление иконы Богоматери. В честь свершившихся чудес Симеон решил основать рядом с Пустынками монастырь, что и было сделано в 1380 году.

В наши дни вокруг древнего монастыря имеется множество построек. Весь комплекс занимает внушительную территорию, которая была обнесена стеной из кирпича. Рядом с монастырём располагалось здание церкви. Одним из центральных объектов комплекса являлся Успенский собор. Кроме того, были построены школа, часовня, колокольня, пара хозяйственных построек и несколько жилых домов. Имеются сведения, что на территории монастыря была амбулатория и больница.

В течение двух веков после основания монастырь занимал место крупнейшего в своём роде на территории восточной Беларуси. С середины XVI века, когда в результате войны между Россией и Речью Посполитой была убита большая часть монахов, религиозная деятельность в нём приходит в упадок. После окончания войны монастырь и вовсе пришёл в запустение. Православные монахи вернулись в Пустынки в 1839 году.

Строительство Успенского собора изначально шло под руководством униатов и длилось семь лет, начиная с 1801 года. Церковь Рождества Пресвятой Богородицы возвели в 1864 году, спустя год она была освящена. Отдельно стоящее здание колокольни возвели спустя два года после постройки церкви. Шатровая звонница имеет высоту почти в 59 метров.

После прихода советской власти помещения монастыря перестали выполнять свои непосредственные функции. В довоенное время здесь был устроен детский дом. В годы Великой Отечественной войны здание монастыря, собора, колокольни и часовни не пострадало. А вот послевоенное время и гонения религии привели к тому, что монастырь был закрыт и разграблен, формировавшийся столетиями архитектурный ансамбль был разрушен.

Работы по реконструкции здания монастыря были начаты в 2003 году. Спустя два года в нём прошла первая служба. В настоящее время в монастыре ведётся активная религиозная деятельность.