La nouvelle concurrence de travailleurs noirs crée du ressentiment chez les blancs, à l’origine de différents conflits, en particulier lors de récession économique ou de crise sociale en 1863, New-York connaît une flambée de violence lors des « émeutes contre la conscription ». Des Irlandais, immigrés ou enfants d’immigrés s’opposent violemment à leur réquisition pour aller servir sur les champs de bataille de la guerre de sécession ; ils mettent à sac plusieurs quartiers africains-américains et procèdent à des lynchages. Ils refusent de partir combattre le sud esclavagiste, alors même que des travailleurs noirs libérés les concurrencent désormais, en ville, sur le marché de l’emploi.