Väikekaupmees ja tollal juba soliidses eas laevaomanik Jakob Aavik alustas hoone ehitamisega 1897. Soov enda tuntust ja prestiiži esile tõsta, jätta endast märk päädis Kuressaare kontekstis ainulaadse historitsistliku hoonemahuga, mille tornist oli hea sadamasse saabuvaid ja uue kauba ning patisakste järele minevaid laevu vaadata.
Saksa okupatsiooni ajal oli majas Orts- komandatuur, pärast II maailmasõda asus sinna EK(b)P Saare Maakonnakomitee, mis 1950. aasta sügisest nimetati EKP Kuressaare Rajoonikomiteeks. 1973. aasta jaanuaris asus sinna haridusosakond.