Tähtitorni sijaitsee Vartiovuoren, toiselta nimeltä Vartiovuorenmäen, puiston laella. Puisto rakennettiin 1800-luvun puolivälissä porvariston avustuksella maisemapuistoksi, jossa oli mahdollista harrastaa ajanmukaisia aktiviteetteja, kuten julkista kävelyä ja idyllisten maisemien katselua.