Die Anfänge der Kirchengemeinde liegen im 11 Jahrhundert. Zu dieser Zeit lebte in Burg Elsdorf die Gräfin Ida von Schwaben. Sie hatte zwei außergewöhnliche verwandtschaftliche Beziehungen: Einer ihrer Onkel war Kaiser und ein anderer Papst! Da liegt die Vermutung nahe, dass es im 11. Jahrhundert sehr wahrscheinlich kirchliches Leben in Elsdorf gegeben hat.
Auffälligstes Merkmal der Allerheiligen-Kirche sind 10 buntverglaste Fenster mit Motiven aus dem Neuen Testament
Das Gemeindeleben ist geprägt von einer reichen Gottesdienstkultur und besonderen Akzenten in der Kirchenmusik.