Podle archeologických nálezů zde stával malý hrad nazývaný Brandov či Loupežnická skála. 

Pozůstatky hradu tvoří výrazný pahorek oddělený od severnějšího pokračování ostrožny hlubokým příkopem. Nejvýraznějším pozůstatkem zástavby velmi malého prostoru vnitřního hradu jsou stopy do skály zasekaného čtverhranného objektu, velkého cca 1,2 x 0,8 m. Hrad se neobjevuje v písemných pramenech, archeologické nálezy ho datují do druhé poloviny 13. stol. (zřejmě na přelomu 13. a 14. stol. zanikl požárem). Hrad byl zjevně opevněným opěrným bodem (tzv. horský hrádek), vybudovaný pravděpodobně za účelem ostrahy dálkové cesty z Čech do Saska, která pod hradem překračovala údolí Načetínského potoka, potažmo státní hranici. 

Podle pověsti zde sídlil loupeživý rytíř. Ostroh porostlý hezkým bukovým lesem je snadno přístupný z náhorní strany a rozkládá se od něj výhled do Načetínského údolí. Z obce Brandov vede na Loupežnickou skálu modrá turistická značka.