Bárbaros, Herejes y gentes de baja condición