Недалеко от местечка Подграби, которое упоминается в писменных источниках в 1285 году, на скале высотой 83 метра начинается строительство нового замка. По замыслу венских архитекторов, которые разрабатывали проектную документацию, он очень был похож на старый английский замок в Виндсоре — владению королевской семьи. Но планы венских архитекторов не были точно выполнены.
Здесь появилось трёхэтажное представительное строение в форме удлинённого четырёхугольника с двумя внутренними дворами и более чем десятком башен. С 1863 года, когда были завершены пристройки, предназначенные для чиновников, внешний вид резиденции слишком не изменился и до настоящего времени напоминает славный, пока скорее завершённый и почти три столетия продолжавшийся этап в истории глубокского поместья — эпоху Шварценбергов.
Род Шварценбергов не был первым владельцем обширного и необычайно доходного глубокского имения. Первые известные стопы уводят историков в XIII столетие, эпоху закладки городов и господства последних Пржемыслов, претендовавших на имперскую корону. В это время на упомянутой скале стоял типичный средневековой замок, известный под названием Фрауенберг. Он принадлежал дворянину Чеху из Будейовиц.
Амбициозных королей из рода Пржемыслов эта сильная резиденция провоцировала до тех пор, пока король "железный и золотой" Пржемысл Отакар II не конфисковал замок для нужд королевской палаты. После сменилось много владельцев замка.
В 1660 году представитель старинного средневекового немецкого знатного рода, живущего и на австрийских землях, Ян Адольф фон Шварценберг, который получил в подарок от эрцкнязя Леопольда Вилема обширные соседние владения в Тржебони, покупает за 385 тысяч золотых и Глубоку. Ян Адольф фон Шварценберг, возведённый в 1670 году в титул имперского князя, получил в Южной Чехии и другие земли и тем самым заложил основы огромного владения, которое удерживалось до второй половины XX столетия, когда Глубоку конфисковали представители зарождающегося тоталитарного государственного строя.
С половины XVII века на неполных три столетия укрепился в глубокских владениях господский род, потомки которого стали меценатами и творцами романтической псевдоготической резиденции, сохранившейся до наших дней. В залах резиденции представлены богатейшие художественные и природоведческие коллекции. Интерьер и коридоры замка украшают оригиналы и копии исторического оружия, изготовленного в основном во второй половине XIX столетия. Коллекция глубокского оружия содержит несколько значительных и ценных экспонатов, которые когда-либо существовали среди замкового оружия.
Стены более чем 140 помещений замка украшает ряд экспонатов из собраний стекла и керамика ( дельфский фаянс, итальянская майолика, мюнхенский, венский, севрский и славковский фарфор, народная южночешская керамика).
Фотографировать внутри замка категорически запрещено.