Po zniszczeniach z okresu powstania listopadowego dawna rezydencja Wettynów przeszła pod zarząd miasta, który zaproponował jej sprzedaż. W 1837 roku właścicielem Pałacu Saskiego został bogaty rosyjski kupiec Iwan Skwarcow.

Skwarcow był właścicielem wielobranżowego sklepu mieszczącego się w kamienicy Roeslera i Hurtiga znajdującej się przy Krakowskim Przedmieściu. Był też przedsiębiorcą budowlanym, który brał udział m.in. przy budowie Cytadeli i Twierdzy Modlin, dostarczał materiały budowlane dla Kolei Warszawsko-Wiedeńskiej. Współpracował z Leopoldem Kronenbergiem (bankier, finansista, inwestor) przy dzierżawie monopolu tabacznego.

W 1837 roku na przetargu kupił za 115 200 złotych zdewastowany Pałac Saski i zlecił jego przebudowę inżynierowi budownictwa Adamowi Idźkowskiemu. Zamierzał uzyskać luksusowy dom dochodowy. W zasadzie nie była to przebudowa, a budowa całkowicie nowego obiektu w miejscu rozebranego do fundamentów pałacu. Wybudowano dwa budynki połączone klasycystyczną kolumnadą, osadzoną na ciągu arkad. Styl powstałego obiektu został określony przez historyków sztuki jako "petersburski klasycyzm".