Обитель находится в старой части Браслава, к северо-западу от городища «Замковая гора».
Основан в 2006 году как филиал (скит) полоцкого Евфросиниевского женского монастыря, с декабря 2007-го имеет самостоятельный статус. Расположен Свято-Пантелеимоновский монастырь в здании бывшей земской больницы (лечебницы), построенном в 1906 году по проекту ковенского губернского архитектора Шпаковского. История лечебницы тесно связана с именем Станислава Нарбута (1853–1926), талантливого и самоотверженного врача, общественного деятеля. За зданием закрепилось название «нарбутовская лечебница».
Значительное по размерам одноэтажное строение имеет П-образный план, выполнено из красного кирпича. Фасады насыщены декором. По прямому назначению использовалось до 1994 года. При приспособлении под монастырь на крыше было установлено два барабана с куполами-луковками. В названии обители сохранена преемственность с историей здания: святой великомученик Пантелеимон, живший в третьем веке, славился как талантливый целитель, врач.
В левом крыле монастыря устроена домовая церковь. Вход в нее украшает роспись с изображением святого Пантелеимона. Главная святыня обители – икона великомученика с частицами его мощей (дар Афонского монастыря Св. Пантелеймона).