W XIV wieku wjazdu do Olsztyna strzegły dwie wieże. Do dziś zachowała się jedna z nich, zwana przez mieszkańców Wysoką Bramą. W połowie XIX wieku zamieniono ją na więzienie.
W Wysokiej Bramie przetrzymywany był Wojciech Kętrzyński - historyk, publicysta, etnograf i bojownik o polskość ziem warmińsko - mazurskich.
W Wysokiej Bramie przetrzymywany był Wojciech Kętrzyński - historyk, publicysta, etnograf i bojownik o polskość ziem warmińsko - mazurskich.