La première chapelle de la Pointe-aux-trembles fut construite entre 1674 et 1678. Elle prenait place à l’angle des actuelles rues Saint-Joseph et Sainte-Anne.
Quelques années plus tard, en 1705, la construction d’une église de pierre de 10,9 m de longueur et de 7,3 m de largeur (36 pieds par 24 pieds) fut entreprise, la façade orientée vers le fleuve, à l’est du presbytère actuel. Le maçon Jean-Baptiste Deguire dit Larose agrandit cette église, en 1741, en construisant les deux transepts et le chœur.