Po obou stranách úžlabiny se tyčí strmé pískovcové skály. Původně se důl nazýval Smolný, protože se zde pálilo dřevěné uhlí a získávala smola. Nachází se zde Mariánské poutní místo, které má již více než dvousetletou tradici.

V roce 1772 zde hraběnka Cervelliová nechala vybudovat dřevěnou kapli. Ještě v tomtéž roce bylo z České Lípy vypraveno první procesí, aby prosilo o odvrácení morové a cholerové epidemie a od té doby směřovaly do Modlivého dolu časté poutě pro odvrácení řady epidemií. V roce 1836 vytesal sochař Antonín Wagner ze Sloupu v pískovci kapličku s gotickými oblouky. Ve 40. letech 19. století sem přijížděl rozjímat a modlit se poslední korunovaný český král Ferdinand V. Dobrotivý. Hraběnka Kinská nechala dát skalní kapli podobu lourdské jeskyně i se sochou Panny Marie Lourdské.

Mariánské poutní místo v Modlivém dole ve Svojkově má více než dvousetletou tradici. Konaly se zde významné církevní události. V současné době tato tradice pokračuje. Od roku 1996 je zde každoročně 1.května zahajován mší svatou mariánský měsíc.