Senj je kot galerija na prostem in je njen najbolj znan spomenik Nehaj, uskoška utrdba iz 16. stoljeća. Zgrajena zaradi obrambe mesta, danes je dom zbirki predmetov, ki pripovedujejo o
bogati zgodovini tega junaškega kraja. S njenega vrha so stražarji budno opazovali pristope mestu, medtem ko danes služi predvsem kot razgledna točka, s katere se odpira edinstveni razgled na otoke in hribe, ki obkrožajo Senj.
Zastrte skrivnosti iz zgodovine lahko odkrijete v nekdanji palači družine Vukasović, današnjem Mestnem muzeju, kot tudi spoznavajoč sakralno dediščino v knjižnici in zakladnici
katedrale.
Vhodi številnih hiš so okrašeni z reliefnimi skulpturami Uskoških glav, v čast družin, ki so tukaj nekoč prebivale. Na osrednjem mestnem trgu Cilnica se nahaja stara utrdba, ki je sodeč po ustnem izročilu s podzemnim tunelom bila povezana s trdnjavo Nehaj.