El Huerto del Cura de tan sólo 13.361 m², nació con su extensión actual cuando en 1876, el labrador Andrés Castaño Peral compró una parcela del huerto en que vivía como arrendado a Juan Espuche.
A la muerte de éste, el huerto fue heredado por sus hijos varones. Siendo su propietario, el segundo de ellos, el capellán José Castaño Sánchez, nacido el 12 de mayo de 1843. Siendo por ello el huerto conocido como del capellán Castaño, para luego llamarse definitivamente Huerto del Cura.
La popularidad de este huerto se inició el año 1873 con un fenómeno no muy corriente, pues en ese año comenzaron a brotar del tronco de una palmera macho muchos hijuelos a la altura de 1'80 m, a primeros del siglo XX los hijos quedaron reducidos a siete, con lo que la palmera quedó tal y como puede verse en la actualidad.
En el año 1894 llegó al puerto de Alicante Elizabeth de Wittelsbach, esposa del emperador Francisco José de Austria y Hungría y más conocida popularmente como Sissi, viajó a Elche, en donde le enseñaron el huerto. La emperatriz quedó profundamente impresionada cuando contempló la palmera, comentándole a su propietario ( el capellán Castaño), que esa palmera tenía un poder y una fuerza digna de un imperio, aconsejándole que le pusiese un nombre. Luego de esta visita el capellán pensó en lo que había pasado, y empezó a llamarla, en su honor, Palmera Imperial. De este modo comenzó la tradición de dedicarle a algunos de los visitantes más ilustres las palmeras existentes en el Huerto.
De 1940 a 1958 fue su propietario el intelectual erudito ilicitano Juan Orts Román que tiene trabajos sobre las Palmeras, el Palmeral y el Misterio de Elche, que gracias a sus esfuerzos, en el 1943 se declaró este jardín como Jardín Artístico Nacional. El mismo día en que apareció en el BOE la proclamación de Jardines Artísticos Nacionales de La Alhambra y El Generalife, se otorgaba el mismo galardón al Palmeral de Elche.