Im Jahre 1662 erbaut der Lauenburger Bäcker Andreaß Groth das Haus an der Elbstraße 14. Bis zum Jahre 1810 bleibt das Haus über mehrere Generationen in der Hand von Lauenburger Bäckermeistern - der letzte war Bäckermeister Siegmund.
Als dieser stirbt, lässt seine Witwe das Haus 1822 als Maurerherberge umbauen. Lange hat sie es allerdings nicht mehr im Besitz. Fünf Jahre später erwirbt der Lauenburger Gastwirt Wilhelm Jenkel das Haus und so wird es bis 1876 im Familienbesitz als Gastwirtschaft geführt. Durch eine Schenkung kommt schließlich 1885 Gastwirt Paul Fischer in den Besitz des Hauses, der es bis 1916 wieder als Herberge führte. Den Namen "Hamburger Keller" bekommt die Gastwirtschaft im Jahre 1951 von Heinrich Oldörp.
1989 übernimmt eine große Erbengemeinschaft das Gebäude, bis es im Jahre 1989 von der Wohnpark Mühlenberg Verwaltungsgesellschaft erworben wird. Seit 2007 ist es wieder im Besitz einer Privatperson und wird seit 2011 erneut zum Verkauf angeboten.