Pour partie, le collège Pasteur est installé dans les murs de l’ancien Lycée de jeunes filles de la ville dont la construction remonte aux années 1890-1891 : nous devons aux constructeurs de cette époque, le bâtiment qui accueille l’administration, les bâtiments E et F et, surtout, notre superbe « cour carrée ».

La partie la plus récente du collège date de 1958, année où le lycée a été agrandi pour assurer la scolarisation d’un nombre croissant de jeunes filles. A la première cour est venue alors s’ajouter une deuxième, qui, aujourd’hui, nous sert aussi de terrain de sport.