Zanim powstał zamek tarnogórski, istniał nad Wieprzem średniowieczny gród, strzegący przeprawy przez rzekę. W odległości około 3,5 km od Tarnogóry w dół rzeki, we wsi Romanów jest wzgórze nazywane Ogrodzisko otoczone od południa i wschodu podmokłą doliną rzeki, od zachodu i północy naturalnymi głębokimi parowami. Od zachodu znajduje się wjazd na wzgórze, nazywany bramą.
Mapa z 1843 roku pokazuje, że zamek [na mapie oznakowany jako kościół] znajdował się na czworokątnym cyplu wysoczyzny. Cypel był otoczony z trzech stron: od północy, wschodu i południa zabagnioną doliną rzeki Wieprz, która w tym miejscu tworzy duże zakole. Od zachodu cypel odcięty był przekopem od pozostałego wzniesienia, analogia usytuowania zamku w pobliskim Krupem.



