Nikołaj Faustin Radziwiłł rozpoczął budowę pałacu w stylu późnobarokowym (architekt D. Fontana) w Dyatlowie na miejscu drewnianego zamku spalonego przez Szwedów, który zakończył się w 1751 r. Początkowo zespół pałacowy Dyatlovsky był kompleksem obejmującym pałac, budynki gospodarcze i park, a także małe formy architektoniczne (pawilony, mosty, rzeźby) znajdujące się w parku krajobrazowym w pobliżu rzeki Dyatlovki. Z biegiem lat wygląd Pałacu Radziwiłłów znacznie się uprościł. Dziś ma płaski dach, ale tymczasem na rysunku Hordy Napoleona z lat 1860-1870 pałac ozdobiony jest dwiema bocznymi trzypiętrowymi wieżami z wykończeniami w kształcie namiotu i wysokim dachem czterospadowym. Elewacje budynku zachowały elementy dekoracyjne późnego baroku. W 1831 r. Miasto Dyatlowo przeszło do skarbu państwa, a pałac przeszedł w posiadanie państwa. Został on dostosowany przez władze rosyjskie pod koszarami kawalerii. Podczas powstania K. Kalinowskiego pałac został przekształcony w szpital wojskowy. Na początku XX wieku w pałacu mieściła się dwuklasowa szkoła, w której studiował I.S. Dorchanin w 1912 roku. W latach 30. sierociniec dla dziewcząt. W latach powojennych i do niedawna placówka medyczna. W tej chwili budynek nie jest używany.