Nejvýznamnější dominantou města je zámek Žerotínů. Začal se stavět již za vlády Jana Pernštejna v roce 1538, Žerotínové ho dostavěli jako náhradu za zbořený hrad v Rožnově pod Radhoštěm. V roce 1648 poškodili zámek Švédové. Počátkem 18. století byl zámek rozšířen a barokně upraven. Po bitvě u Slavkova sloužil zámecký areál nějaký čas jako vojenská nemocnice, v roce 1855 tu byla zřízena ženská trestnice, jediná na Moravě a ve Slezsku. Tehdy byla odstraněna umělecká výzdoba a pokračovala devastace památky. Zámek také zčásti sloužil jako kasárna a k bytovým účelům.
V listopadu 1951 byl zámek dán do vlastnictví Místnímu národnímu výboru ve Valašském Meziříčí a sídlil v něm Sdružený klub pracujících, vzniklý sdružováním kulturních organizací, spolků a klubů ve městě.V březnu 1991 došlo ke změně názvu na Kulturní zařízení města Valašského Meziříčí. Vzhledem k nevyhovujícímu technickému stavu zámku rozhodlo vedení města v roce 1995 o zahájení komplexní rekonstrukce objektu, připravované od roku 1980. Rekonstrukce začala v červnu 1996.V roce 2001 byla pro veřejnost otevřena venkovní terasa nad řekou Bečvou, v letních měsících s restauračním provozem, který zajišťuje Divadelní kavárna. Od roku 2002 je zpřístupněno také zámecké nádvoří s fontánou a dekorativními plochami zeleně. Zároveň bylo dokončeno také centrální schodiště a výtah, který umožňuje bezbariérový přístup do Kulturního zařízení.