Здание галереи по праву считается одним из самых красивых в Смоленске. Оно было заложено в 1877 году, более двух десятилетий в нем размещалось первое реальное училище в Смоленске, ставшее в 1880 году Александровским в честь 25-летия царствования Александра II. Училище проектировали архитекторы М. Ф. Мейшер и О. Ф. Хартен. За образец постройки был взят корпус того же назначения в городе Ливны Орловской губернии. В 1898-99 гг. здание частично перестроили под руководством инженера Е. Ф. Лещинского. Во время Великой Отечественной войны строение сильно пострадало от бомбежек и было восстановлено в 1947 году архитектором Д. П. Коваленко с незначительными изменениями внутренней планировки. Вплоть до середины 1980-х гг. в стенах бывшего училища располагался Смоленский строительный техникум. В 2011 году в здании разместилась коллекция изобразительного искусства Смоленского музея-заповедника. Роскошный фасад Художественной галереи, обладающий дворцовой представительностью, сохранившаяся парадная лестница с ажурными чугунными ступенями привлекают особой атмосферой старины и искусства.