Srednjeveški grad, ki se dviga na strmem pobočju nad Branikom, je zagotovo eden najlepših gradov na primorskem. Njegova prva omemba je iz leta 1230. Prvotni posestniki so bili vitezi Rihemberški, po katerih je grad dobil svoje ime. V tem času je bil sezidan tudi mogočni gotski stolp, ki še vedno dominira nad okolico. Po izumrtju rodbine sredi 15. stoletja je zamenjal številne lastnike, ki so v poslopje vnašali nove arhitekturne elemente. Značilno podobo mu danes daje tudi renesančno obzidje z okroglimi obrambnimi stolpi (rondelami).

V času 2. svetovne vojne je bilo grajsko poslopje požgano in izropano, že čez nekaj let pa se je pričela obsežna prenova. Obnovljeni grad je danes priljubljena atrakcija. Poleg izjemnega kulturnega in zgodovinskega pomena je ta tudi prava zakladnica za vse ljubitelje netopirjev. Številni mali sesalci so si za svoje domovanje namreč izbrali kar grad Rihemberk.