Una antigua tradición local, trasmitida de generación en generación, nos cuenta como un buen día la Virgen se apareció milagrosamente en un altar esculpido en una roca situada en el exterior de la Capilla de A Virxe do Xurés. Una ligera hoquedad en la piedra representa el nicho sagrado desde donde la Virgen ordenó la construcción de un templo, allá en lo alto, a los vecinos de Riocaldo.
La fé en los milagros de la Virgen y los indicios hallados, movilizaron a la gente de este lugar para construir una ermita digna y un importante camino de acceso, construyendo una edificación con grandes dosis de heroísmo por lo difícil de llegar al lugar elegido.
Este edificio es uno de los pocos representantes del románico tardío en la zona. El edificio fecha del siglo XIV y fue modificado a lo largo de toda la primera mitad del siglo XVIII, especialmente la fachada, a cuál es de estilo barroco. Su planta es rectangular. En ella son celebradas dos romerías.