Pour modifier le jeu de caractères et le classement par défaut d'un tableau y compris ceux des colonnes existantes (notez le convertir en clause):
alter table <some_table> convert to character set utf8mb4 collate utf8mb4_unicode_ci;
Modifié la réponse, grâce à l'incitation de quelques commentaires :
et