Irish travelers, minorité en danger