En 1753 ya aparecía en el censo de bienes.
Con la imagen de la virgen no sabemos que pasó, en el pueblo la verdadera y primitiva imagen de la Argamasa era la llamada Argamasina, conocida hasta los años 60-70 y luego desaparecida, se cree que es actualmente la imagen a la que veneramos, imagen del sigo XIII.
Antiguamente, la ermita de Nuestra Señora de la Argamasa estaba situada al lado del río, fue construida allí, porque dice la leyenda que la virgen fue encontrada en las aguas del río Alagón. Esta ermita fue anegada con consiguiente la ruina, y no se hizo una nueva hasta 1906-1909. Esta duró hasta 1989 (80 años). En 1990 fue reconstruida por su gran deterioro.