Kaplica Dylewska – nazywana także Ostrobramską (Udana kopia Bramy Ostrobramskiej z Wilna) – powstała w 1957 roku z inicjatywy ówczesnego proboszcza kadzidlańskiej parafii, księdza Mieczysława Mieszki. Architektonicznie nawiązuje do wileńskiej Ostrej Bramy. Wewnątrz znajduje się kopia obrazu Matki Boskiej Ostrobramskiej, namalowana przez Łucję Bałzukiewicz wileńsko-lubelską artystkę, uczennicę Olgi Boznańskiej. (Obecnie obraz po pracach renowacyjnych znajduje się w Centrum Kultury Kurpiowskiej.)
Kaplica jest w trakcie renowacji.
Kaplica Dylewska w Kadzidle zyskała kamienne skarpy oraz ogrodzenie, ma także odnowione schody. Całość dopełniły efektowne brukowe herby, ułożone po obydwu stronach kaplicy. Od strony gimnazjum cieszy oko herb gminy Kadzidło, zaś po przeciwległej herb Maryjny. Uporządkowano także teren otaczający kaplicę.
W przyszłym roku zostanie ułożona podłoga wewnątrz obiektu, ściany zyskają kurpiowski wystrój – zawieszony zostanie ludowy krucyfiks oraz Droga Krzyżowa wykonana w formie wycinanki. Drewniane drzwi do kaplicy zastąpi krata metalowa wykuta przez rodzimych kowali, umożliwiająca bliższy kontakt z wnętrzem obiektu.