1721 m. Šilutėje įsteigtas valstybinis dvaras. Tai nesudėtingų formų vėlyvo klasicizmo bei istorizmo laikų pastatas su neryškiais stiliaus bruožais bei santūriu, būdingu Klaipėdos kraštui dekoru. Reorganizavus Prūsijos valstybės valdymo sistemą 1808 – 1818 m. dvarą įsigijo Radkių šeima. Dvaro atgimimas ir klestėjimas prasidėjo 1889 m., kai jį įsigijo dvarininkas Hugo Šojus. Dvarininkas pertvarkė dvaro ūkį, dalį žemių išnuomojo bei padovanojo miestui. Atkurtame dvare įsteigtas pirmasis Klaipėdos krašto muziejus, kuriame kauptos unikalios kolekcijos.
1944 m. spalio mėnesį dvare apsistojus Raudonajai armijai didelė dalis muziejinių vertybių buvo sunaikinta. Sovietiniais metais čia veikė pagalbinis vykdomojo komiteto ūkis, Žemės ūkio mokykla ir Žemės ūkio technikumas.
Po Lietuvos nepriklausomybės atgavimo pradėti dvaro komplekso projektavimo ir restauravimo darbai. 2015 metais miestui ir jo svečiams atvertos H. Šojaus dvaro komplekso durys. Šiuo metu čia veikia muziejaus mokslinis archyvas – biblioteka, restauracijos centras, vykdoma edukacinė veikla, vyksta virtualios ir kilnojamosios parodos. Čia įsikūręs Šilutės turizmo informacijos centras.