История Часовой башни, одного из символов Выборга, берет свое начало в конце XV века. Строилась она как колокольня старого кафедрального собора. Самая ее древняя часть - массивное прямоугольное основание. В XVII веке она была надстроена восьмериком с арочными окнами, а сверху был сооружен шпиль, позже утраченный. После пожара 1793 года башня была снова надстроена: в 1796 году по проекту архитектора Брокмана было сооружено завершение в стиле классицизма.

На башне был установлен набатный колокол, подаренный городу императрицей Екатериной II. В 1848 году был заменен часовой механизм. Внутри башни устроена деревянная шахта, в которой находятся гири этих часов.