La fortaleza es construida en
tre finales del siglo XII y principios del XIII, siendo en ese momento propiedad de los Mariño hasta 1393, momento en el que Ruy Soga de Lobeira (Mariño) es degollado en Noia, por lo que el Arzobispado de Santiago se hace con la posesión tanto del castillo como de cosas que había dentro.
Para 1425 el castillo pasa a manos de los Moscoso de Altamira, uno de ellos, Bernal Eáns Moscoso, en 1465 encierra al obispo Fonseca y lo lleva a Vimianzo.
La Gran Guerra Irmandiña derriba la fortaleza en 1467 pero, el obispo Fonseca manda a erguir de nuevo el castillo, pero Lope Sánchez de Moscoso lo recupera por la fuerza y es así como hasta el año 1836 el Castillo continúa siendo propiedad de dicha familia.
Es así como los oficiales de justicia gobernaron el castillo hasta 1880 que el poeta Evaristo Martelo reconstruye el castillo y, en 1936 siendo propiedad de dicho poeta el ayuntamiento republicano expropia las Torres, pero los franquistas lo anularon.
En 1965 se produce un importante incendio en el castillo, lo que conlleva al abandono y, Dolores Martelo lo deja a la Iglesia.
Finalmente, en 1973 y hasta entonces la diputación provincial compra el castillo por 600,000 pesetas y lo restaura en los 80.
Hoy en día se continúan realizando modificaciones al castillo como para poder promocionarlo y difundirlo, mientras se realizó este trabajo, cuando se fue a hacer el trabajo de campo, se pudo observar cómo se estaban efectuando por dentro trabajos de pintura a las escaleras de la torre, renovación de tablas, entre otros.
En todo este párrafo se refleja que el Castillo de Vimianzo es uno de los Castillos mejor conservados de Galicia
Castillo de Vimianzo 