In 1789 onderging het pand een renovatie, de gevelsteen boven de ingang verwijst naar deze gebeurtenis. 'In dit vernieuwd gebouw woont liefde, hulp en troost. Hier zorgt Barmhartigheid voor ’t ouderlooze kroost'.

Tot het midden van de twintigste eeuw deed het gebouw dienst als weeshuis. Daarna kwam er een school in, vervolgens een jeugdopvangcentrum en later een bank. De gemeente kocht het monument in 2000. Even heeft er een restaurant en een delicatessenzaak ingezeten, maar daarna stond het jaren leeg. Sinds 2009 wordt het pand af en toe gebruikt om streekeigen producten te verkopen.