Das Haus wurde gemäß einer Bauinschrift 1610 von Baumeister Abraham Lenger für den Lohrbacher Keller und Burgvogt Johann Schragmüller erbaut.[1] Später wurde es von Clara Rüdin, der Witwe des kurpfälzischen Kellers, bewohnt und danach war es im Besitz des Schneiders Fahringer, der es dem Stift Mosbach verkaufte. Dessen Rektorat saß eine Zeit lang im Gebäude, bevor der Kaufmann Eisenmann das Gebäude erwarb.[2] Seine Bezeichnung als Palm’sches Haus hat das Gebäude von einem abermals späteren Besitzer,[3] dem Kaufmann Anton Palm, dessen Name am Eckerker prangt.

Das Haus war vermutlich wegen seines variantenreichen und äußerst dekorativen Fachwerks nie verputzt[4] und wurde 1981/82 umfangreich saniert, wobei im Keller das Restaurant Ratskeller eingerichtet wurde.[5]