Par la beauté de son architecture, l'élégance de sa décoration (ferronneries, lucarnes à pignons, girouettes), la disposition de ses fameuses tuiles vernissées et son vieux puits, il évoque davantage le luxe d'un palais gothique que la simplicité d'un hospice. Dans la Grand-Salle ou « chambre des pôvres » se dresse la statue d'un émouvant Christ aux liens (15e s.). La salle du Polyptyque expose le célèbre Jugement dernier de Rogier van der Weyden.