Fondé en 1561 par le prélat Gérard d'Harméricourt, le collège de Saint-Bertin passa sous la direction des jésuites en 1572. La municipalité reprit la charge de l'enseignement après 1761, transfert qui se fit au détriment de la gratuité des études. Le site fut occupé par le couvent des récollets (religieux d'observance franciscaine) jusqu'à la Révolution. Il accueillit ensuite le Petit Séminaire, entre 1812 et 1830, pour se transformer en pensionnat plus généraliste qui nécessita une extension des bâtiments ; laquelle dut passer par l'acquisition des maisons attenantes, opération aboutie en 1845. A partir de 1850 la totalité de l'enseignement était dispensé à Saint-Bertin, classes supérieures comprises (lycée). La politique d'acquisition immobilière continua et permit au Supérieur Constant Poulet d'engager de grands travaux de construction, confiés à un architecte de la Compagnie du Chemin de Fer du Nord, M. Lejeune. Le bâtiment donnant sur la rue Saint-Bertin (et les escaliers monumentaux qui s'y trouvent) date de cette époque ; il a été élevé entre 1856 et 1858. La chapelle fut construite peu de temps après entre 1863 et 1868 ; les sculptures sont dues à M. Buisine de Lille, et les vitraux à la maison Antoine Lusson de Paris (1863-1865). En 1919 l'établissement reçut le maréchal Pétain, le vainqueur de Verdun, ancien élève du collège. Après guerre il est nécessaire de construire un nouveau bâtiment : l'aile Lehembre (du nom du Supérieur d'alors). Le projet formulé en 1922-1923 par l'architecte parisien Lucien Vaugeois est mis en oeuvre en 1930 par son confrère de Saint-Omer Gustave Vandenbergue. En 1946, le collège acquit le château attenant au levant, qui avait été construit en 1832 par Louis-Alexandre Fiolet. Il accueillit la section Classique et abrite aujourd'hui l'école primaire.