Kaple Všech svatých byla postavena kolem roku 1400 na hřbitově cisterciáckého kláštera v Sedlci. Hřbitov měl pověst Svaté země, neboť opat Jindřich zde rozhodil hrst hlíny, kterou přivezl z Jeruzaléma. Proto se tu nechávali pohřbívat nejen místní, ale i lidé z Bavorska, Polska a Belgie. V roce 1318 sem bylo pohřbeno 30 000 lidí, kteří zemřeli při morové epidemii.