Cela fonctionne pour mariadb avec --default-authentication-plugin=mysql_native_password , seul le démarrage du conteneur est vraiment lent.
[Edit] Voici un MWE, qui fonctionne avec différentes versions de mysql (5 et 8) et le dernier mariadb (10) :