Замок постраждав у 1648 та 1651 роках від Хмельниччини: озброєні загони бідноти захопили і зруйнували фортецю.
Під час воєн з турками (1672р.) фортеця була сильно зруйнована та втратила свої оборонні функції. В кінці XVII ст. новий власник замку Ян Фірлей перебудував його та використовував як своє житло. На замковому дворі, поблизу східної стіни, виростає палац, у північно-східній фортечній стіні з'являється кам'яна в'їздна брама з двома воротами по боках, пишно декорована кам'яним рицарем, вазами і меморіальною дошкою з описом історії замку. Старі вежі теж оновили: два верхніх яруси вимурували з цегли і обличкували тесаними регулярними блоками вапняку. Стіни замку з усіх боків сягали 6-метрової висоти та двометрової товщини.
В кінці ХІХ ст. на кошти графа Ростовського архітектор Теодор Талевський відреставрував башти замку в неоготичному стилі. Проте немає свідчень чи виглядали вони настільки ж декоративно в XVII ст. А є документальні свідоцтва – про те, що ще в 20-ті роки ХХ століття були високі стіни навколо замку та неоготична брама до замкового подвір‘я.
Палац на момент реставрації перебував в стані руйнації, його перебудували, але в значно скромнішому вигляді. Поруч виросли одноповерхові господарські приміщення.
Інші свідоцтва кажуть, що під час Першої світової замок був зруйнований, але швидко по тому відбудований. Та за кілька десятиліть - нова світова війна і нова руйнація. Палац повністю зникає з землі.
В 60-х рр. ХХ ст. була проведена консервація будівлі. Ще не так давно, кажуть, замок був оточений з усіх боків глибоким ровом з водою. Залишки вхідної брами ще можна побачити у північно-східній частині фортечних мурів. До цієї брами вів колись дерев‘яний міст.
План замку наближений до квадрату, чотири абсолютно однакові наріжні башти орієнтовані точно за сторонами світу. У вежах розташовувались стрільниці, що мали чотири яруси. Вежі п‘ятикутні, з високими шатровими покрівлями з червоної черепиці. В 2004 році під час сильної бурі з веж позривало дахівку. В 2007 р. почалася реконструкція - упорядкували територія навколо фортеці, замінено покрівлю на трьох вежах. Зараз в замку проводять облаштувальні роботи, результатом яких буде відтворення середньовічної твердині в її первісному - українському вигляді.