Die Xaveri-Bruderschaft verehrt den Heiligen Franz Xaver. Die Verehrung des Franz Xavers wurde besonders durch die Jesuiten gefördert. Sie kam über die Jesuiten von der Dillinger Universität nach Höchstädt. Im Jahr 1720, knapp hundert Jahre nach seiner Heiligsprechung wurde dem großen Missionar in der Stadtpfarrkirche von dem Höchstädter Bürger Adam Finstermacher ein Altar gestiftet (Südseite).

Wegen der besonderen Umstände seines Sterbens wird Franz Xaver als Fürsprecher für eine gute Sterbestunde angerufen. Diesem Anliegen ist auch die älteste noch bestehende Bruderschaft der Pfarrei Höchstädt verschrieben, die Franz-Xaveri-Bruderschaft. 1723, auf dem Höhepunkt der Verehrung des Heiligen, wurde sie gegründet, von Papst Innozenz XIII. bestätigt und mit Ablässen ausgestattet.

Mittelpunkt der Bruderschaft wurde der Franz-Xaver-Altar, den 1829 Papst Pius VIII. für die verstorbenen Mitglieder auf immer privilgiert.

Die Xaveri-Brunderschaft konnte 2023 ihr 300-jähriges Jubiläum feiern.