Pendant longtemps, la vie communautaire de Charlesbourg est animée par les congrégations religieuses qui l’habitent. En 1948, les Frères de Saint-Vincent de Paul fondent le Patro de Charlesbourg à l’intérieur d’une grange. Cette initiative survient alors que quelques enfants demandent aux clercs de les occuper l’été et d’utiliser la patinoire l’hiver.