Grāfs fon Borhs 18.gs. sadalīja daļu muižas zemes apbūves gabalos Ebreju tirgotājiem, kuriem tā laika Vidzemes guberņā bija liegts iegūt zemes īpašumus. Varakļāni tolaik atradās Vitebskas guberņā. Līdz ar to ebreju kopienai Varakļānos ir sena vēsture. Ebreju kapi stipri atšķirās no Latvijā tradicionālajām kapsētām.