Старинный замок Гравенстейн некогда был резиденцией графов Фландрских. Здание достраивалось на протяжении нескольких столетий.

Старейшие фрагменты замка появились в 1100-е годы, а большая часть жилых помещений относится к более позднему периоду. Вплоть до XIV века замок был основной крепостью города, затем был превращен в городскую тюрьму (до 1700-х годов), а впоследствии здесь действовала фабрика по обработке хлопка. От ворот во двор замка можно попасть по длинному укрепленному туннелю.

Самые крупные здания на замковой территории — главная башня (донжон) и постройка, где в средневековье размещалась резиденция графов. Маршрут осмотра зданий размечен указателями, можно попасть и внутрь построек. Часть помещений занимает жуткое собрание пыточных орудий средневековой эпохи.