Longtemps après [le martyre de saint Nazaire et saint Celse, vers 68], le Seigneur révéla à saint Ambroise [en 395] où se trouvaient leurs restes. Celui-ci laissa Celse où il était. Le corps de Nazaire fut trouvé avec son sang frais comme s'il venait d'être enseveli, et répandant une merveilleuse odeur ; il était entier, sans corruption, avec ses cheveux et sa barbe. Il en fit la translation à l’église des apôtres et l’ensevelit avec honneur. Dans la suite il fit aussi l’élévation de saint Celse qu'il plaça dans la même église. Ils souffrirent sous Néron, qui commença, à régner vers l’an du Seigneur 57.
Au sujet de ce martyr, voici ce que saint Ambroise dit dans la Préface : « Le saint martyr Nazaire, illustre par le sang généreux qu'il a répandu, a mérité de monter au royaume du ciel. En souffrant tout ce que les tourments ont de plus cruel, il surmontait la rage des tyrans par sa constance et il ne céda jamais devant les menaces des persécuteurs, car il avait pour le soutenir au milieu de ses combats Notre Seigneur Jésus-Christ qui combattait avec lui. Alors il est conduit au temple pour immoler aux idoles profanes; mais fort du secours divin, il est à peine entré que ces simulacres sont réduits par lui en poussière. Pour ce fait, il est conduit au milieu de la mer, et, soutenu par les anges, il marche à pied sec sur les flots. O heureux et noble combattant du Seigneur qui en attaquant le prince du monde a rendu une multitude innombrable de peuple participante de la vie éternelle ! O grand et ineffable mystère, qu'il y ait plus de joie dans l’Église de ce qu'ils ont mérité le salut, qu'il n'y a d'allégresse dans le monde pour les avoir punis ! O bienheureuse mère qui tire de la gloire des tourments de ses enfants qu'elle conduit au tombeau sans pleurs et sans gémissements, et sans cesser de célébrer leurs louanges quand ils sont passés aux royaumes célestes ! O témoin merveilleux, resplendissant d'un éclat céleste, dont les vertus répandent une odeur plus pénétrante et plus suave que les aromates de Saba ! »
Jacques de Voragine, Légende dorée