Les Jésuites prennent en main le Collège à partir de 1630, et
s’installent au cœur de la Cité, Place Chambeau (actuelle place Diderot)
en 1653. Ils forment alors les jeunes notables de Langres et de sa
région, l’effectif variant de cent cinquante à deux cent cinquante
élèves entre 1700 et 1760. Les fils de notables ruraux devaient prendre
pension chez l’habitant, les Jésuites ne recevant pas d’internes.
L’enseignement au collège était gratuit, mais peu de familles pouvant
subvenir aux frais occasionnés par la scolarité, l’établissement
accueillait surtout des enfants de notables, officiers, robins et
marchands… tel Denis Diderot.

Une quinzaine de religieux assuraient l’encadrement des élèves, dont six
s’occupant de la classe, les autres ayant des charges pastorales.
L’enseignement y restait somme toute assez classique ; grammaire,
humanités, rhétorique et philosophie.
L’établissement comportait un cabinet de physique qui abritait
différentes « machines » (planétaire, pneumatique, d’électricité)
permettant véritablement l’étude des sciences.

Dans la nuit de 13 au 14 février 1746, un incendie ravagea une partie
des bâtiments. Le 2 juin de la même année, la première pierre du
bâtiment que nous voyons encore aujourd’hui fut bénite par l’Evêque de
Mgr de Montmorin. En 1761 l’arrêt du Parlement de Paris ordonnant la
fermeture de tous les établissements jésuites, ces derniers ne purent
connaître l’achèvement du collège.

La Chapelle, actuel lieu Culturel de l’Etablissement, est achevée en
1767, le portail en 1770. Celui-ci, imposante clôture qui protège ce
lieu d’étude et de prière, est surmonté d’une sculpture du langrois
Antoine Besançon symbolisant l’Instruction .