З початку XVI століття і до 1939 року волинське містечко Олика було одним з родових гнізд династії Радзивілів, найдавнішого князівського роду в Європі. До наших днів збереглися князівський палац і величний колегіальний костел, архітектурна перлина Волині. Олика, що перейшла до Радзивілів на початку XVI століття, 1586 року стала майоратним володінням, тобто її не можна було продати або розділити, а успадковували її старші сини роду. З 1547 року Радзивіли мали титул князів Олики і Несвіжа.

У 1558- 1564 роках Микола Радзивіл Чорний побудував Олицький замок, перший замок бастіонного типу в Україні. 1640 року Альбрехт Станіслав Радзивіл перетворив фортецю на палацовий комплекс. Замість фортечних стін виросли палацові корпуси, що утворили квадратний двір.

В’їзд до двору вінчала висока вежа у стилі бароко. Замок, як і раніше, захищали бастіони, які обслуговували 202 гармати і великий гарнізон.

Нині в корпусах колишнього замку розміщена психіатрична лікарня, проте туристам доступ на територію відкритий.