Bor u Skutče se nalézá v jihovýchodní části okresu Chrudim v poměrně členitém terénu skutečské pahorkatiny na okraji Českomoravské vrchoviny uprostřed přírodní rezervace Toulovcovy maštale. Jedná se o množství pískovcových skal, která tvoří malebná údolí s nádhernými lesy, často využívanými sběrači borůvek, brusinek a hub.

Svou polohou je Bor u Skutče nejlepším východiskem do této oblasti. Najdeme ho severovýchodním směrem od obce Proseč a západním od města Litomyšl. Odtud vedou značené turistické cesty i cyklostezky směrem na východ k vlastním Toulavcovým maštalím a Městským maštalím, na západ k oblíbeným skalním útvarům Kolumbovo vejce, Kazatelna, Kříž a k přírodní rezervaci Pivnice.