В 1811 году у въезда в город, у Московской заставы, по случаю празднования десятилетия царствования Александра I были заложены триумфальные ворота, получившие название Московских. 15 сентября 1813 года строительство было окончено. Ворота фиксировали положение главного въезда в город со стороны Московского тракта. Сложены они были из кирпича на растворе, а снаружи оштукатурены. Крыша — из листового железа. Всё сооружение изначально было окрашено в желтый цвет, а детали отделки — в белый. Функциональное назначение — проверка и регистрация всех приезжающих. В верхнем этаже с 1880 года разместили городской архив, который находился здесь до 1910 года.
Разобраны в 1925 году. Воссозданы в 2011 году.