В 1470-х годах город, выросший на полуострове к востоку от Выборгского замка, был обнесён каменной стеной с 9 башнями длиной около 2 км. В первоначальном виде это была воротная башня и представляла собой косоугольный единый объем, сложенный из гранитных валунов на известковом растворе, высотой 12,5 м до конька черепичной кровли. Въездной проем ворот имел в ширину 2,6 м.

После того, как башня утратила военное значение, её передали в ведение магистрата Выборгской ратуши. Отсуда и название башни в которой устроили арсенал, где хранились оружие и боевые доспехи.

В 17 веке башню стали использовать в качестве колокольни собора доминиканского монастыря, руины которого находятся рядом. Новое назначение стало причиной последующих переделок, исказивших её первоначальный облик. Башня Ратуши обрела форму восьмерика на четверике. В 1758 году строение увенчали островерхим барочным покрытием. После пожара и последующего восстановления в конце XVIII века Башня ратуши не меняла своего облика.

Весь советский период башня простояла заброшенной. В 1974—1984 годах по проекту архитектора И. Хаустовой была восстановлена барочная кровля, выполнены лестницы, восстановлены перекрытия и установлены оконные рамы, но башня так и осталася пустовать до передачи сектантам в 1997 году. В 2016 башня передана Выборгскому музею-заповеднику.