É só fazer um experimento, troca a palavra negro pela braco ou o oposto, aí

saberá.
Racismo engloba todos, se fosse só contra negro seria "negrismo".