Le groupe s'est formé en 1991 après la dissolution du groupe Grinder. Grinder s'était séparé neuf mois plus tôt parce que le groupe avait perdu son contrat d'enregistrement et que les membres n'étaient pas d'accord sur l'avenir du groupe. Le line-up du Capricorne était composé des membres de Grinder Adrian Hahn à la basse et au chant, du guitariste David Hofmann et du batteur Stefan Arnold. Bien que tous les membres aient été dans le même groupe, ils ont décidé de ne pas relancer Grinder et de recommencer sous le nom de Capricorn, car ils se considéraient comme très éloignés de Grinder à la fois conceptuellement et stylistiquement.