Cela s'est avéré être une erreur stupide, mais publiez-la quand même au cas où quelqu'un d'autre aurait le problème :
J'accédais à l'instance de réplique par erreur - j'avais copié le point de terminaison pour la réplique, et il est apparemment en lecture seule. Donc, si vous rencontrez ce problème, vérifiez que vous vous connectez à l'instance principale ou, mieux encore, au point de terminaison du cluster de bases de données.
Modifier : Selon la réponse de @Justin, nous devrions absolument utiliser DB Cluster :