Hřbitov je neznámého stáří. Nejstarší čitelný náhrobek je z roku 1640. Pohřby se zde konaly do 2. světové války. V márnici je zachován kamenný stůl k rituálnímu omývání zemřelých. Hřbitov se nachází 1,5 km JZZ od náměstí.
Nedaleko Pohoří se nachází městečko Jistebnice, které je rodištěm mnoho známých židovských osobností, jako například numismatika Viktora Katze (1880 - 1940), veřejného činitele a mecenáše výtvarných umělců Leopolda Katze a komunistického publicisty André Simona (1895 - 1952 popraven). Všichni tito Židé mají pomník na židovském hřbitově v Pohoří, který je situován na kopečku před obcí. Jsou na něm pomníky s nápisy jak hebrejskými, tak německými i českými. Nachází se jich zde přes 200, ty nejstarší pochází už s poloviny 17. století.
Posledním pochovaným je Viktor Katz (25. 1. 1940). Jednatel Klubu rodáků Karel Hlouň jeho urnu zde na židovském hřbitově uložil tajně v roce 1940.