Allí a comienzos del siglo XII un antepasado suyo procedente de Barallobre (Fene) construyó la casa fuerte de la familia, aprovechando una donación de Pedro Froilaz, Conde de Traba. Como en esa época comienza a generalizarse el uso del apellido entre la nobleza, e indicaba casi siempre procedencia territorial, podemos considerar verosímil la hipótesis de que ese Barallobre procediese de la parroquia del mismo nombre situada a la orilla de la Ría de Ferrol. Refuerza esa posibilidad el hecho contrastado de las propiedades que poseía en Barallobre (Fene), al igual que en buena parte de Ferrolterra, el conde de Traba y su familia.
Andrés Barallobre llega a ser caballero de D. Sancho Sanches de Ulloa, conde de Monterrei. Participa en las reuniones de los nobles gallegos que se oponen al proceso de centralización impuesto por los Reyes Católicos a finales del siglo XV. Cuando las tropas de Isabel y Fernando cercan al mariscal Pardo de Cela en las tierras de Mondoñedo, Andrés Barallobre acude en su ayuda con un grupo de caballeros. Escapa del ajusticiamiento de Pedro Pardo el 17 de diciembre de 1483 en Mondoñedo. En represalia las tropas castellanas derrumban su casa fuerte de Friol. Él se refugia en el Pazo de Golmar en Sobrado dos Monxes, y en su fachada coloca el blasón de los Barallobre, incluyendo en él el águila, símbolo de los Pardo de Cela. En septiembre de 1486 se entrevista con los Reyes Católicos en Melide, exponiéndoles los razonamientos de los nobles gallegos en contra de la centralización. Murió el 27 de mayo de 1536 en el Pazo de Golmar en Roade, Sobrado dos Monxes.
Según el historiador Ramón Villares, “la derrota de la nobleza (de 1483) provoca un cambio importante en la conformación de la sociedad gallega en el tránsito a la Edad Moderna. El reformismo de los Reyes Católicos se traduce en la aparición de nuevos ámbitos administrativos, las provincias y nuevas instituciones de gobierno, tales como el Capitán General, la Audiencia o la Junta del Reino, en el seno de una monarquía progresivamente centralizada”.