Anciennement, le château était la résidence des comtes de Neuchâtel. Il fut érigé entre le 12e et 15e siècle, transformé au 19e et restauré entre 1905 et 1934. Il se présente comme un ensemble de bâtiments disposés autour d'une grande cour.