Радзивиллы — богатейший род Великого Княжества Литовского. Николай Радзивилл Сиротка построил замок в 1584-1616.
Замок выдержал осады русских войск в 1654 и 1659 годах. А в 1706 во время Северной войны осаду войск шведского короля Карла XII, но потом был сдан. В 1720-х замок реконструирован. Крупнейший в Европе театр балета открыт в 1740 году в Несвиже .В городе действовали придворная капелла, кадетский корпус и школа флотских офицеров в Альбе (пригороде Несвижа) для войска Радзивилла.
В 1792 году замок сдался русским. В 1812 Доминик Иероним Радзивилл выступил на стороне Наполеона. В 1813 году сокровища были вывезены из замка (в основном в Эрмитаж). В 1860-х замок вернулся к Радзивиллам.
В 1921 году в замок вернулся 16-й несвижский ординат Альбрехт Антоний Радзивилл, который пытался восстановить былой статус замка. 17 сентября 1939 года Красная армия заняла город и замок без единого выстрела и здание передано автодорожному техникуму. Во время войны замок не пострадал, в нём находился штаб генерала Гудериана.
Во времена СССР в замке был санаторий КГБ. А сейчас замок на стотысячной купюре белорусского банка.
