Wystawiona na pamiątkę trzech pierwszych kościołów drewnianych, wzmiankowanych w 1529, 1603 i w początku XVII wieku, z fundacji rodu Bilskich. Ostatni z nich – modrzewiowy, kryty gontem, prezentujący się dość okazale, wyświęcony w 1716 roku, służył parafii do końca XVIII wieku, do momentu wybudowania nowego obiektu fundacji Dłuskich. Drewnianą kapliczkę wzniesiono w 1918 roku pod wezwaniem Matki Bożej Bolesnej. W 1996 roku została gruntownie odnowiona i uroczyście poświęcona przez arcybiskupa Bolesława Pylaka. Wewnątrz kapliczki znajduje się figurka Matki Boskiej Fatimskiej. Corocznie odbywają się przy niej nabożeństwa majowe.
