Biała Góra leży we wschodniej części gminy Rąbino, w powiecie świdwińskim. Do siedziby gminy w Rąbinie odległość wynosi ok. 7 km, natomiast do siedziby powiatu w Świdwinie jest ok. 16 km.

Biała Góra to mała wieś sołecka. Według przekazów Biała Góra była wsią rycerską. Pierwsze wzmianki pochodzące z 1523 r. wskazują, że wieś stanowiła lenno rodu von Zozenow. Następnie właściciele majątku zmieniali się kilkakrotnie. We wsi istniało dawniej założenie dworsko-parkowe. Niestety budynek dworu nie przetrwał do dziś. Pozostał jedynie park dworski, pochodzący z XIX w. Park miał charakter naturalistyczny. Jego powierzchnia wynosi 3 ha. Obecnie park nie jest użytkowany. Zatarły się ciągi spacerowe i pierwotny układ. Do wsi można dojechać autobusem oraz samochodem.