Det nederste i kampesten er det ældste af Hammershus. Det røde i munkesten blev tilføjet af Lübeckerne der besad borgen 1525-1575.
Hovedtårnet bliver kaldt Manteltårnet fordi taget var et manteltårn, dvs. et tvillinge-tag. Lige som det du kan se på Å Kirke i dag.
I Manteltårnet boede slotsherren med sin familie. Her sad Leonora Christine og Corfitz Ulfeldt som fanger i 14 måneder 1660-1661.