origine du terme : »personne de couleur »et sa signification

J'écoute ce vendredi matin Xavier Mauduit, je précise que je suis métis, mulâtre ,donc noir et aucun de ces 3 termes ne me gêne par contre l'expression "homme de couleur".......... cela supposerait-il qu'il y a des Hommes (les vrais) et un cran plus loin (plus bas ?) les autres, ceux de couleur ? L'un des invités à l'émission a déclaré que "métis, mulâtre"étaient péjoratifs....
Ce serait super si M.Xavier Mauduit pouvait nous faire une émission sur l'origine historique de tous ces termes utilisés pour la différenciation des hommes entre eux .
Cordialement, un fidèle auditeur