Здание бывшего Пансиона мужской. В конце XVIII в. здесь сформировалась обширная городская усадьба влиятельного откупщика купца Гавриила Васильевича Рюмина. Владение располагалось на склонах большого оврага, занимая значительную часть квартала между ул. Пятой и ул. Садовой.
С 1980 г. здесь располагается Рязанский областной художественный музей им. И П. Пожалостина.