Замок был основан в 1140 году графом Невшателем. Первоначально он был построен из дерева, и уже в XIII веке все деревянные постройки заменили каменными. Окружал замок внушительных размеров каменный забор, по всему периметру которого располагались рвы, наполненные водой, их глубина достигала двух метров.

Последний граф, Рудольф IV погиб в 1375 году, в боях, с наступающими на Берн Гуглерскими рыцарями. На время замок перешел во владения епископа Базеля. В 1388 году, Берн и Золотурн отвоевали замок в битве Земпахе. Австрийцы сдались после семи недель тяжёлой осады. Берн предоставил им возможность свободно покинуть пределы города. После завоевания крепость служила в качестве резиденции Бернского пристава. В XIX веке южная часть стены замка была снесена, ее место было заполнено окопами. Несмотря на эти меры, замок является одним из самых впечатляющих замков в округе.