Здание построено в 1880-х годах и принадлежало купцу Н.И.Рафаиловичу. Затем домовладение приобрел купец П.Г.Иванов. Многие комнаты в доме сдавались в наем. Так, Е.А.Говберг, проживающая в этом доме, давала уроки игры на фортепьяно, здесь же снимали квартиры советник Кинеловский, преподаватель мужского училища Зельцер и другие. В 1915 - 1916 годах в здании размещалось Таганрогское отделение госбанка.