Oui, c'est possible, vous devrez lire les données des fichiers CSV à l'aide du module CSV.
http://docs.python.org/library/csv.html
Et injectez les données à l'aide de la liaison Python MySQL. Voici un bon tutoriel de démarrage :
http://zetcode.com/databases/mysqlpythontutorial/
Si vous connaissez déjà python, ce sera facile