Zámek stojí na místě původní renesanční tvrze ze 16. století, která byla od 18. století přestavována na barokní a poté klasicistický zámek. V letech 1839–1846 získal svůj současný vzhled v tzv. modernizovaném italském stylu díky projektu architekta Julia Eduarda Zerneckeho. Zámek je spojen s rodem Silva‑Tarouca, který byl jeho majitelem od roku 1768 až do roku 1945.

Interiér zámku obsahuje expozice Vlastivědného muzea v Olomouci a unikátní sbírku obrazů a kreseb Josefa Mánesa, který zde řadu let pobýval a využíval zámek jako ateliér.

Rozkládá se na ploše 21,5 ha a patří k nejcennějším krajinářským parkům v Česku. Založil jej František Josef I. Silva‑Tarouca v duchu anglického krajinářství a později rozšířil jeho syn Ervín Vilém. V parku najdeme romantickou Červenou věž, Mánesův pavilon a oranžerii podle návrhu architekta Vojtěcha Ignáce Ullmanna, včetně trojlistu s erby navrženého samotným Mánesem.