Einstellungen > Zahlungarten > Sofort deaktivieren (Shopware 6 - Einstellungen - Zahlungsarten) reicht nicht aus.
Was du noch machen musst:
Verkaufskanäle verwalten > Bearbeiten > Allgemein > Zahlung und Versand > Zahlungsarten > Sofort löschen (Shopware 6 - Einstellungen - Verkaufskanäle)
Das Problem hatte ich bei Zahlungsart Trustly auch.