L’edifici dels banys tenia diverses sales, d’entre les quals, una era destinada a miqvé, el bany ritual jueu, a la qual s’hi accedia segurament des del carrer de l’arc de Sant Ramon o dels Banys Freds. Aquestes termes es coneixien amb el nom de “Banys Nous”, per a diferenciar-los dels banys vells, ubicats en la vilanova que és avui el barri de Ribera.  L’edifici dels banys, situat a la banda de ponent del carrer i per tant fora dels límits del Call, es mantingué dempeus, tot i que sense ús, fins que fou enderrocat el 1835. El gran casal de Banys Nous 20 se situa fora dels estrictes límits del call. Fou construït a la segona meitat del segle XVI com a residència principal de la nissaga barcelonina dels Fivaller. Des de 1932, la planta principal és la seu de l’Institut Agrícola Català de Sant Isidre.