Bien que la façade du corps principal sur cour porte, en fers d'ancrage, la date de 1593, le bâtiment a été largement remanié, voire largement reconstruit lors de l'érection de l'aile secondaire, qui porte sur la façade arrière la date 169[?] en briques vernissées. L'hôtel, qui appartenait à l'hôtel-Dieu, abritait sous l'Ancien Régime le contrôleur général des Fermes : le corps de logis principal à droite servait de résidence, et l'aile latérale était probablement réservée aux bureaux et aux communs. Au 19e siècle, l'édifice, qui jouxte le presbytère et fait face à l'église, accueille probablement des activités charitables, d'où son nom d'ouvroir. Il sert toujours de cadre à des activités paroissiales ou associatives.