Death Cult se formó en abril de 1983 cuando Ian Astbury se unió con Billy Duffy después de conocerse cuando Southern Death Cult abrió para Theatre of Hate. Astbury acababa de disolver su banda anterior buscando algo más directo, menos tribal. Duffy llegaba del caos de Theatre of Hate con una Gibson Les Paul y ganas de hacer ruido controlado.
El EP se grabó y lanzó en julio de 1983 en Situation Two, con Jamie Stewart en bajo y Raymond Taylor Smith en batería. Las sesiones fueron rápidas y sucias, capturando la energía cruda de una banda que sabía exactamente lo que quería decir pero no cuánto tiempo tendría para decirlo. Dos de las canciones exploraban el respeto de Astbury por las culturas nativas americanas: "Ghost Dance" se inspiró en el movimiento religioso Ghost Dance y las enseñanzas de Wovoka, mientras que "Horse Nation" tomó letras casi textualmente del libro Bury My Heart at Wounded Knee.
Para suavizar las connotaciones góticas de su nombre y ganar mayor alcance, la banda cambió su nombre a The Cult en enero de 1984. El EP alcanzó el No. 2 en las listas independientes del Reino Unido, pero para entonces Death Cult ya era historia. Cuatro canciones que definieron el sonido de una generación en el tiempo que otros tardaban en escribir una.