Selon la légende, l'hospice d'aliénés d'Ablain aurait été fondé en 1270 par Hugues d'Ablain, chanoine d'Arras. Cet hospice avait une grande renommée et son patron saint Nazaire était visité par beaucoup de pélerins.
La tradition veut que Loyse, fille du prince de Bourbon-Carency, y guérit miraculeusement alors qu'elle était frappée de folie intense. En remerciement, son père fit édifier en 1505 une église en ces lieux.