Fils d'un organiste de Pézenas (Justin Périlhou) qui laissa quelques pages de genre pour le piano, Albert Périlhou suit sa formation musicale à l'École Niedermeyer de Paris, où il est boursier de l'évêque de Pamiers (Auguste Bélaval) 1860 à 1866. Il y est élève de Louis Niedermeyer, Gustave Lefèvre et Camille Saint-Saëns et fait sa scolarité en même temps que Gabriel Fauré, né une année plus tôt et boursier du même évêque. Quelque part, il est toujours dans l'ombre de son aîné. Il obtient dans cet établissement :