Il nome Padre Santo deriva dal luogo in cui la torre è ubicata, nel Piano del Padre Santo vicino alla chiesa dei Teatini . E' estremamente difficile datare con certezza l'edifcazione dell'edificio poiché non ci sono pervenuti documenti storici utili a questo scopo. Di certo la sua costruzione è precedente al 1337 poiché in un atto notarile di quell'anno, che ci parla di 240 metri di mura fortificate a difesa di quella zona, la torre non è menzionata.
Nel portale principale si poteva leggere fino a qualche decennio fa una data, 1561; non è ancora chiaro però se questa si riferisse all'anno di costruzione della torre o ad un suo restauro. E' certo comunque che la torre abbia subito nei secoli vari rifacimenti, l'ultimo dei quali risalente ai primi anni del XVIII secolo. La torre ha pianta rettangolare e si sviluppa su tre piani. Il portale si presenta decentrato con arco a tutto sesto ed archivolto in pietra calcarea, diversa ad esempio dalla pietra, arenaria, di cui sono costituiti i balconi ed il resto della facciata. La torre risulta appoggiata nella parte posteriore ai resti delle vecchie mura di cinta.