Pozoruhodná kaple sv. Ignáce vytesaná do skály pochází z roku 1760. Historie kaple je spojena s epidemií neštovic a úplavice, která Všemily zasáhla. Srbskokamenický kněz Ignaz Clar se v této nouzi obrátil o pomoc k Bohu a v den svátku svého křestního patrona sv. Ignáce z Loyoly (tj. 31. července) uspořádal prosebné procesí. V září pak epidemie ustoupila. Svátek sv. Ignáce se od té doby stal pro místní dnem díkůvzdání a vděčnosti a tomuto světci zasvětili i nově vybudovanou kapli, která byla vytesána v kameni a vyzdobena obrazem sv. Ignáce z Loyoly. Jméno tvůrce kaple se neuvádí.