Renesanční zámek s arkádami na nádvoří byl postaven v prvním desetiletí 17. století tehdejšími majiteli panství Lukrecií Nekšovnou z Landeka a jejím druhým manželem Albrechtem z Valdštejna na základech středověké tvrze z první poloviny 15. století na vyvýšenině pravého břehu řeky Bečvy. Pozdějšími majiteli - uherskou šlechtou z rodu Illésházy - byla zámecká budova v průběhu 18. století několikrát přestavována a upravována. V roce 1708 zámek vyhořel, přičemž z něj zbyly pouze holé zdi. Opravovat se začal až od roku 1719 a o dva roky později byl pořízen úředníkem hraběte Mikuláše Illésházyho, Františkem Palmerem, velmi podrobný popis vsetínského zámku. Díky tomu je zřejmé, že zámek nesloužil jako trvalé reprezentativní sídlo hraběte, ale byl jim užíván přechodně a sloužil hlavně potřebám správy panství a vrchnostenských úředníků. V roce 1740 byly opraveny hodiny na zámecké věži.