Porque pardo sempre irão tentar encaixar como negro ou branco. O Brasil tem muita miscigenação, pra diferenciar se olha o fenótipo. Se parecer mais com o dos brancos pode ser visto como branco, se for com o dos negros pode ser mais visto como negro.
E depende da região também, no caso do Neymar que é pardo, por exemplo, na região dele ele achava que era branco porque diziam que ele era branco porque a maioria ali era negra, se fosse no interior de SC (maioria branca) ele provavelmente seria visto como negro.