La maladrerie, fondée entre 1163 et 1174, fut prise par Urbain III sous sa protection en 1185. Outre la " maison de Saint-Saturnin " hors des remparts et les terres adjacentes, la maladrerie jouissait d'un droit perçu sur les juifs d'Avignon. Le 30 septembre 1322, Jean XXII, trouvant ses revenus plus importants que ses besoins, avait par bulle confié une partie de ses possessions immobilières à la collégiale Saint-Agricol. Clément VI, quant à lui, pour favoriser son essor, accorda le 18 mars 1387 des indulgences à ses bienfaiteurs. À cette même époque, le prieuré de Fenouillet fut adjoint au prieuré Saint-Lazare. En janvier 1456, le bénéfice est supprimé par le pape pour que ses revenus soient entièrement attribués à l'entretien des malades. En 1598, après avoir été louée aux Pénitents bleus depuis 1541, la chapelle de Fenouillet est vendue aux Pénitents de la Miséricorde. Le nombre de malades, qui n'avait jamais dépassé la douzaine, se trouve réduit à un, voire aucun, à partir de 1612. En 1673, les bâtiments et le jardin sont loués à un cultivateur, les deux recteurs, choisis par le conseil de la ville, se contentant alors d'assurer le service religieux de la chapelle, et ce jusqu'en 1679, date de l'union avec Saint-Bénézet. En 1786, les recteurs de Saint-Bénézet vendent finalement les bâtiments.