Sarayın ilk sahibləri Taqanroqda anadan olmuş Nikolay Alferaki və ailəsi idi. Mixail Şepkin 1863-cü ilin iyulunda Alferaki Sarayında qalmışdır. 1870-ci illərdə Alferaki ailəsi iflas etdikdən sonra saray Yunan taciri Negropontə, bağçası isə tacir icmasına satıldı. Anton Çexov ( Oğlanlar Gimnaziyasının şagirdi kimi) 1876-cı ildə ticarət klubunda verilən konsertlərə gəlir və daha sonra İonych, Mask və Mənim həyatım hekayələrində saraydan bəhs edir.

1918-ci ilin fevral-aprel aylarında bina Taqanroq Sovet İşçilər Şurasının qərargahına çevrildi.

Binada 1918-ci ildə işğal zamanı Alman müharibə xəstəxanası, 1919-cu ildə isə Anton İvanoviç Denikin qəragahı yerləşirdi.

Taqanroqda Sovet hakimiyyəti qurulandan sonra binada müxtəlif qurumlar yerləşir. 1927-ci ildən sonra burada 1898-ci ildə Anton Çexov tərəfindən təsis edilmiş Regional Tədqiqatlar Muzeyi yerləşdirilir.

II dünya müharibəsində taqanroqın işğalı zamanı rus sənətinin bütün kolleksiyası, eləcə də 339 digər sənət obyekti Almaniyanın işğal orqanları tərəfindən talan edildi.

Alferaki Sarayı 1991–1996-cı illərdə təmir edilmiş və hal-hazırda Alferaki Sarayı adı ilə məşhur olsa da, Regional Tədqiqatlar Muzeyi olaraq fəaliyyət göstərir.

Möhtəşəm akustikaya malik geniş salon Bələdiyyə tərəfindən rəsmi mərasimlər üçün, xüsusən Taqanroq Bələdiyyə Başçısının ən yaxşı məktəb məzunlarının şərəfinə təşkil etdiyi illik mərasim üçün istifadə edilir.

Muzey kolleksiyasının əsası məşhur tarixi və ya sənət adamlarının, Rusiya çarları I Aleksandr və I Pyotrın, dramaturq və şair Nestor Kukolnikin, rus heraldikasının banisi Aleksandr Lakierin, aktrisa Faina Ranevskaya, uşaq kitablarının müəllifi İvan Vasilenko, romantik bəstəkar Axilles Alferaki, general Pol von Rennenkampf və daha çoxunun şəxsi əşyaları ilə formalaşmışdır.

•  
  Alferaki Sarayındakı 19-cu əsr Taqanroq qubernatorlarının və merlərinin portretləri ilə bəzədilmiş akt zalı
•  
  Taqanroqdakı Müqəddəs Üçlük qalası və dəniz limanının layihəsi (Avstriyalı mühəndis Baron Ernst Friedrich von Borgsdorf tərəfindən qurulmuşdur)
•  
  Mixail Lermontovun dostu, general-mayor Aleksandre Reminin portreti
•  
  İoannis Varvakisin Vladimir Borovikovski tərəfindən yaradılmış portreti
•  
  Qubernator Baltasar fon Kampenhausen
•  
  General İvan Krasnov
•  
  General Pol von Rennenkamfın talanları .

•  
  Keçmiş Alferaki malikanəsindəki ticarət məclisi, 20-ci əsrin əvvəlləri
•  
  2006-cı ildə çəkilmiş foto.
•  
  Alferaki Sarayının həyətinə girən qapılar (Ulitsa Frunzedən), 2006-cı ildə çəkilmiş foto.
•  
  2008-ci ildə çəkilmiş foto.