Voilà, pour un seul résultat de colonne, vous pouvez utiliser fetchColumn()
et aussi vous avez aliasé le nom de la table et non le nom de la colonne
$stmt = $conn->prepare("SELECT COUNT(*) as a from `session`");
$stmt->execute(array());
echo $stmt->fetchColumn();