Okay ich glaube ich habe den Fehler nun selbst gefunden.
Meine vendor/shopware/core/Framework/Resources/config/packages/shopware.yaml hatte in der redis_url vom http_cache noch „redis://redis“ stehen, statt die korrekten Daten zu verwenden. 
Jetzt scheint das Problem gelöst.