Según se cree, el 30 de abril de 1747 se constituyó en la Villa de la Real Isla de León la Venerable Hermandad, cuyos estatutos fueron aprobados por el Consejo de Castilla en 1805. Esta asociación fue radicada en la Iglesia Mayor Parroquial, donde tiene altar propio con retablo dorado. Tiene concedidas varias indulgencias por diversos pontífices. El libro de acuerdos fue comenzado en el año 1780, en el que consta que en el año 1834 procesionaba esta Hermandad con la del Santo Entierro, siendo ésta la que sacaba a la Virgen de la Soledad.

En estos doscientos años han pertenecido a la Hermandad personajes de gran importancia para la Historia de San Fernando, como el Marqués de Ureña y Manuel de Croquet.

En 1940 se inicia la reorganización de la Cofradía, sacándose las imágenes del descendimiento en el Viernes Santo de 1965. En 1985 se aprueban los nuevos estatutos y pasa a tener su nombre actual.