Le manoir Panet, tel qu’il apparait aujourd’hui est le résultat d’une édification réalisée en deux étapes séparées d’environ 20 ans. La maison initiale, dont la construction s’est achevée en 1812 est un bâtiment de forme rectangulaire, dans l’esprit français, une structure de bois en pièce sur pièce, sur fondation de moellons, d’une dimension de 13m (43 pi) x 10m (33 pi). Le bâtiment est coiffé d’une toiture à deux versants. Deux cheminées-foyers sont situées dans les murs pignon. Plusieurs fenêtres procurent un éclairage abondant.

Vers 1834, le bâtiment initial fut agrandi par l’ajout de deux annexes sur les murs-pignon, prolongeant ainsi l’habitation de 4,6m (15 pi) au pignon est et de 6m (20 pi) Figure 1:: Le manoir Panet vers 1900. (collection privée) au pignon ouest. Cet agrandissement modifia grandement l’aspect du bâtiment par la modification de la toiture originale à deux eaux en une toiture à quatre eaux, dans l’esprit Regency. Le parement de planche à clin présent sous le parement de brique actuel devrait dater de l’époque de construction de ces adjonctions. Tant la structure, la disposition des ouvertures que l’aménagement intérieur, possèdent une grande intégrité.