Le collège latin a été bâti de 1827 à 1835 grâce à l'argent provenant de la succession de David de Pury sur l'ancien bassin qui était un port intérieur de la ville. Que de souvenirs d'études secondaires dans ce bâtiment qui n'abritait alors que des classes de garçons.