26 октября 1812 года отряд генерала Гарпе, посланный графом Витгенштейном, после упорного боя занял Витебск. Потеряв 600 человек, русские захватили несколько орудий и 1500 пленных.

26 октября 1911 года на Успенской горе, на бульваре перед губернаторским дворцом был заложен памятник в честь освобождения города. К столетию этого события работы закончить не удалось, поэтому открытие состоялось с опозданием, 6 декабря 1912 года. Выполненный по проекту архитектора И. А. Фомина, памятник обошелся в 35 тысяч рублей. Он представляет собой остроконечный обелиск красного полированного финского гранита высотой 21 метр. Венчает обелиск бронзовый двуглавый орел на шаре. Постамент украшен бронзовыми венками и касками. На передней грани постамента помещается бронзовая доска с надписью: «Бессмертной доблести героев Отечественной войны. 13, 14, 15 июля и 26 октября 1812 г.».

Этот величественный памятник сохранился до наших дней.