Sur les groupes d'holonomie homogènes de variétés à connexion affine et des variétés riemanniennes