Construida hacia en siglo XVIII sobre la antigua ermita de cinco naves conocida como Santa María de los Baños o de la Fuencalda del siglo XIV dedicada a la Virgen de los Baños, esta ermita fue construida sobre la fuente en la que, según la leyenda, se apareció la Virgen.
La festividad se celebra el 8 de septiembre en honor a la patrona con misa y procesión. Su singularidad es que el agua caliente nace en la parte inferior del templo y es conducida, pasando por el altar mayor al depósito que esta debajo del Camarín de la Virgen, dónde se encuentra la iamgen de la Virgen de los Baños que data de siglo XIII, al Balneario Termal, anexo a la iglesia.
En tiempos anteriores el arroyo de aguas termales que la recorre por su centro corría al aire libre, en la actualidad puede verse el manantial de aguas ferruginosas a través del pozo que se encuentra en el interior de la iglesia. En su interior se puede observar en el altar entre otras figuras, a San Isidro y San Sebastián, patrón de Fuencaliente.