Après un certain temps, la base de données est redevenue accessible en écriture. Je joins la réponse que j'ai obtenue du support heroku :
Et effectivement quand on fait un pg:info
et avoir une base de données suiveur, vous pouvez voir un Behind By
champ vous indiquant combien de commits votre suiveur est en retard.
Le mien était loin derrière, il a donc fallu du temps pour le rattraper...
Probablement une bonne idée d'ajouter ceci à la documentation heroku postgres