Na Miklavškem hribu, ki je priljubljena izletniška in pohodniška točka Celjanov, še danes vidimo ohranjene ostaline rimskega templja, ki se skriva na platoju nad mestnim parkom. Tempelj je bil obdan s portikom, s streho pokritim hodnikom, z dvema polkrožnima in eno četverokotno nišo. Svetišče je bilo izkopavano v letih 1947-51 in deloma obnovljeno med leti 1951 in 1961. Nenavadna je njegova lega nad nekdanjim rimskim mestom, ki skupaj z arhitekturno zasnovo svetišča predstavlja izjemo in posebnost na slovenskem ozemlju. Izkopavanja so razkrila zapleteno sliko, poleg tega pa je ohranjenih zelo malo elementov, s katerimi bi si lahko pomagali pri rekonstrukciji. Samo poimenovanje kot Herkulovega (včasih poimenovan tudi kot Heraklejevega) svetišča je bilo utemeljeno na osnovi dveh majhnih delov kipcev, na katerih lahko prepoznamo upodobitev Herkula – rimskega božanstva.