Leżący w dolinie Kamiennej Bałtów jeszcze zanim stał się własnością "Małego Księcia" (jak nazywano księcia Franciszka Ksawerego Druckiego-Lubeckiego) należał do Małachowskich. Oni to na skarpie nad doliną wznieśli dworek z widokiem na dolinę. Dokoła zaś stworzyli park. Do dworku dojeżdżano przez ozdobną bramę umieszczoną na szczycie podjazdu.Książę Aleksander Drucki-Lubecki, potomek "Małego Księcia" podjął się zadania budowy siedziby rodowej w Bałtowie na miejscu dawnego dworku. W tym celu udał się w podróż do Włoch zabierając ze sobą przyszłego budowniczego pałacu. Po powrocie z tej wyprawy (1898 r.) rozpoczęto budowę pałacu. Trwała ona do roku 1904. Można też spotkać informacje podające lata 1894-1899. Książę Aleksander Drucki-Lubecki, potomek "Małego Księcia" podjął się zadania budowy siedziby rodowej w Bałtowie na miejscu dawnego dworku. W tym celu udał się w podróż do Włoch zabierając ze sobą przyszłego budowniczego pałacu. Po powrocie z tej wyprawy (1898 r.) rozpoczęto budowę pałacu. Trwała ona do roku 1904. Można też spotkać informacje podające lata 1894-1899.