Zespół klasztorny podominikański składa się z czterech jednopiętrowych skrzydeł zbudowanych na planie zbliżonym do kwadratu. Skrzydło południowe przylega do ściany kościoła. Przy wsch. skrzydle wieża wysunięta z lica ściany, w środku zespołu wirydarz.

Klasztor przechodził trudne chwile już od XVIII w., aż w czasach carskich uległ likwidacji. Popadał w ruinę, tylko ofiarność rodziny Karskich właścicieli pobliskich Górek, oraz praca mieszkańców i ks. Kuklińskiego uratowały zabytek. Od I wojny światowej mieściły się w klasztorze szkoły. Po II wojnie światowej w PRL liceum ogólnokształcące nosiło imię Brunona Jasińskiego. Ojcem Brunona był Jakub Zysman człowiek bardzo dla Klimontowa zasłużony, z pochodzenia żyd, pracował jako lekarz, szanowany ze względu na bezinteresowność (ubogich leczył za darmo). Wspólnie z Michałem Karskim i  Stefanem Chajeckim  prowadził działalność gospodarczą społecznikowską i dobroczynną. Zmarł w 1926 r. Jego syn Bruno przybrał nazwisko Jasiński, został komunistą, poetą awangardowym (ciekawe ile osób zna jego wiersze?) wyjechał do Związku Sowieckiego. Stwierdził, że chciałby mówić i pisać językiem Lenina, wyrzekł się polskiego obywatelstwa. Nie na wiele mu się to przydało w nowej ojczyźnie robotników i chłopów, zginął w 1938 r. w czasie czystek stalinowskich, prawdopodobnie jako szpieg z jaśniepańskiej Polski. W wolnej Polsce, dzięki postawie dwóch nauczycielek nie jest już patronem szkoły i wzorem dla młodzieży, jego wielce zasłużony ojciec ma tylko ulicę w Klimontowie.