Башня ратуши (Raatitorni) была построена в 1470-х годах. Это единственное сохранившееся фортификационное сооружение, входившее в систему обороны юго-восточной стены Каменного города. После того, как башня утратила свое оборонительное значение, она была передана в ведение городской ратуши - здесь разместился арсенал; с тех пор башня и получила свое название.

Позже башня ратуши использвалась как колокольня церкви финского прихода Выборга (собора доминиканского монастыря).

Башня многажды ремонтировалась и перестраивалась. Первоначально она представляла собой единый косоугольный в плане объем, выступавший из стены в сторону поля (этот объем высотой 9,5 метров сохранился и ныне). Считается, что первоначально в башне были ворота, заделанные предположительно в XVI веке. В 1758 году над ней было сооружено островерхое перекрытие. Шпиль сгорел 13 марта 1940 года. Временное шатровое перекрытие было сооружено только в 1958 году. В конце 1970-х перекрытие было восстановлено в первоначальном виде.