V roce 1673, se v soupisu majetku po zesnulém Přemyslu III. uvádí zámek s kaplí, pivovar, vinopalna a hamr (cca 200 m severozápadně od zámku, zcela zaniklý), mlýn se zde ještě neuvádí. První doloženou písemností je soupis majetku při prodeji panství z roku 1772, kromě mlýna se v podzámčí nacházel hospodářský dvůr, hostinec (čp. 8 jihovýchodně od zámku, zcela zaniklý), pivovar a palírna (naproti hostinci).
V roce 1833 koupil panství přední moravský šlechtic Antonín Bedřich hrabě Mitrovský z Nemyšle který se zasloužil o reorganizaci a zvelebení sobotínských a petrovických hutí. Kromě toho se podílel na rozvoji zámeckého parku.
V roce 1834 mlýn provozuje mlynář a vinopalník Dominik Schindler.
V roce 1844 získali zámek bratři Kleinové, kteří se následkem rozmachu sobotínských železáren stali jednou z nejbohatších rodin na Moravě. Kleinové založili u zámku přírodní park se vzácnými dřevinami, a také shromáždili na zámku rozsáhlou sbírku obrazů, která je dnes součástí obrazárny velkolosinského zámku. Později byli Kleinové povýšeni do šlechtického stavu a v zámku měli reprezentativní šlechtické sídlo.