Durante la Alta Edad Media el Freiherr von Oberhofen construyó el Balm Castle en una colina sobre el pueblo. En 1200, una hija de la familia, Ita, se casó con la familia von Eschenbach y le dio a esta familia el castillo y el pueblo. En el siglo XIII comenzaron un nuevo castillo con foso a orillas del lago Thun. Uno de los últimos propietarios del castillo, Walter IV von Eschenbach, fue asesinado junto con el rey Alberto I en 1308 por el sobrino de Alberto, Juan. En 1306 la familia von Eschenbach se vio obligada a vender Oberhofen y el castillo a los Habsburgo. Los Habsburgo nombraron a una sucesión de vasallos para que les administraran la zona, especialmente los Kyburg, que también poseían el castillo de Thun. Tras la derrota de los Kyburg en la guerra de Berthoud de 1383-84 y la decisiva derrota de los Habsburgo en la batalla de Sempach en 1386, Berna comenzó a expandirse hacia las tierras austríacas en el Oberland Bernés. Ocuparon Oberhofen en 1386 y finalmente pudieron comprar o usurpar toda la tierra y los derechos de cada señor feudal en 1397. Al año siguiente vendieron el castillo y el territorio de Oberhofen a Ludwig von Seftigen, un ciudadano de Berna.[1]​

En los siglos siguientes, la ciudad, el castillo y la herrería pasaron por varias familias patricias bernesas. Después de que la línea masculina de la familia von Erlach en Oberhofen desapareciese en 1652, Berna adquirió el castillo y las tierras. Crearon el bailiazgo de Oberhofen y convirtieron el castillo de Oberhofen en el centro administrativo del bailiazgo. Después de la invasión francesa de 1798, Oberhofen am Thunersee se convirtió en parte de la República Helvética como el cantón de Oberland. Tras el colapso de la República y el Acta de Mediación de 1803 se unió al recién creado distrito de Thun.[1]​

El castillo pasó a manos privadas después de 1803 y tuvo varios propietarios en los años siguientes. En 1849-52 la familia Pourtàles renovó y amplió el castillo hasta su actual aspecto. En 1940 el americano William Maul Measy estableció la fundación del castillo de Oberhofen para administrar y mantener el castillo. En 1952 pasó a formar parte del Museo Histórico de Berna y dos años más tarde abrieron una sucursal en el castillo.[1]​