В 1598 году Ружаны купил канцлер великий литовский Лев Сапега. Он построил здесь в 1602 году замок с тремя башнями, который имел скорее оборонительные функции. Неизвестно имя архитектора, однако в старинных ружанских записях, датированных 1602-м годом, упоминается о крупномасштабных строительных работах, без указания места проведения застройки. Скорее всего, замок возводился на месте старой усадьбы Тышкевичей, которым имение принадлежало ранее.
Первоначально дворец имел оборонительный характер — двухэтажный крестовидный в плане каменный объём дополняли три четырёхгранные башни.
В 1784—1788 гг. придворный архитектор Сапег Ян Самуэль Беккер перестраивает древний дворец-замок. Одновременно зодчий возводит в низине перед дворцом приходской костёл и монастырь базилиан, а также кладбищенскую часовню и трактир. За своё талантливое творчество Беккер получил от Сапег пожизненную пенсию в 2150 злотых. Две башни древнего дворца были разобраны, а западная была включена в общий объём новой постройки, ставшей симметричной по композиции.
Во время Первой мировой войны (1914) по недосмотру фабричных прачек во дворце произошёл сильнейший пожар, часть стен обрушилась. В межвоенный период предпринимались попытки восстановления, однако вследствие разрушений Великой Отечественной войны дворец окончательно превратился в развалины.
После Великой Отечественной войны состояние Ружанского дворца долгое время оставалось удручающе плачевным. Дворец не восстанавливался. Остатки дворцовых стен разрушались, частично были разобраны местными жителями на кирпичи для восстановления хозяйств в послевоенный период.
Летом 2008 года на территории дворцового комплекса были начаты раскопки и реставрация. Восстановление дворцового ансамбля началось с въездной арки и примыкающих к ней боковых флигелей. Согласно программе на дворец ежегодно будет выделяться более миллиарда рублей.
В начале 2012 года на въездной арке поставлена скульптура Святой Анны, вместо уничтоженной на границе XIX—XX веков.
Ружанский дворец также был включён в число 27 объектов, расходы на сохранение которых могут финансироваться из республиканского бюджета.
По состоянию на конец 2024 года происходит реконструкция восточного корпуса, начатая в 2019 году. Восстановлен фасад (его покрасили в зелёный цвет, что вызвало противоречивые мнения, но, как говорят специалисты, именно такого цвета были эти стены в старину) и крыша, а также галерея, примыкающая к Центральному корпусу.