Crimes racistes aux États-Unis: analyse statistique

Après mon récent article (parties 1 , 2 , 3 ) sur le crime et les tirs de la police aux États-Unis et leur lien avec la race, j'ai décidé de continuer sur ce sujet et d'analyser d'autres données ouvertes dans le même esprit - heureusement, il y en a encore assez grâce au programme de signalement criminel du FBI. ...



Aujourd'hui, nous allons enquêter sur les données sur les crimes de haine. Tout d'abord, examinons toutes les statistiques dans leur intégralité, puis nous examinerons de plus près l'intolérance raciale et en particulier les crimes commis par des blancs et des noirs sur la base de l'inimitié envers les blancs et les noirs.

Donnée initiale

Comme données initiales, j'ai téléchargé un ensemble de données à partir du site Crime Data Explorer , qui est maintenu par le FBI dans le cadre du programme américain de signalement criminel (j'ai déjà écrit à propos de ce site dans l'article précédent). Vous pouvez télécharger le lien direct ici (4,4 Mo). L'archive téléchargée contient les données réelles au format CSV, ainsi qu'une description textuelle. Je n'ai en aucun cas transformé les données, donc si vous souhaitez répéter vous-même l'analyse, vous devriez obtenir les mêmes résultats.



J'ai également utilisé des données sur la population américaine, ventilées par race, obtenues à partir des données officielles du Census Bureau et complétées par des données modèles pour la période de 1991 à 2009. Vous pouvez les télécharger ici(Yandex.Disk). Pour analyser la répartition géographique d'indicateurs spécifiques, j'avais également besoin de la taille de la population par état, obtenue de la même source (télécharger ici ). J'ai utilisé les mêmes données dans mon article précédent.

Que sont les crimes haineux et comment sont-ils signalés?

Sur le site Web du FBI:

Le programme UCR du FBI définit le crime de haine comme une infraction criminelle commise qui est motivée, en tout ou en partie, par les préjugés du délinquant contre une race, une religion, un handicap, une orientation sexuelle, une origine ethnique, un sexe ou une identité de genre.

Transfert:

Le programme de signalement criminel du FBI définit un crime de haine comme un crime motivé (en partie ou en totalité) par le préjugé du délinquant contre la race, la religion, la contrainte physique, la sexualité, l'appartenance ethnique, le sexe ou l'identité de genre.

Le certificat accompagnant le jeu de données original sur la criminalité indique également ce qui suit (italiques conservés):

Because motivation is subjective, it is sometimes difficult to know with certainty whether a crime resulted from the offender’s bias. Moreover, the presence of bias alone does not necessarily mean that a crime can be considered a hate crime. Only when a law enforcement investigation reveals sufficient evidence to lead a reasonable and prudent person to conclude that the offender’s actions were motivated, in whole or in part, by his or her bias, should an agency report an incident as a hate crime.

En d'autres termes, tous les cas enregistrés dans la base de données en tant que crime haineux, la chute devraient y arriver juste après les motivations de l'auteur établies par l'enquête.



Naturellement, il est impossible de vérifier les conclusions de l'enquête dans chaque cas, car la base de données regroupe les rapports de centaines d'organismes chargés de l'application de la loi à travers le pays et l'accès à tous les documents d'enquête est (on peut le supposer) uniquement pour les employés du FBI. La base de données elle-même ne fournit que des statistiques prêtes à l'emploi.

Structure de la base de données

La base de données contient des données sur les crimes motivés par l'intolérance de 1991 à 2018. Au moment d'écrire ces lignes, la dernière entrée est datée du 31 décembre 2018, un total de 201403 entrées. Chaque entrée est une affaire de crime. Ainsi, nous obtenons en moyenne 7193 crimes par an.





Je n'utilise que quelques champs dans mes recherches (ceux en gras) car mon objectif principal est de trouver des liens entre les types de crime, les types d'intolérance et la race des criminels . Cependant, dans vos propres recherches, vous pouvez bien sûr aller plus loin et analyser, par exemple, l'âge des criminels et des victimes ou les lieux typiques des crimes en fonction de leurs types, etc. Comme on dit, la portée de l'imagination n'est pas limitée :)

Types de crimes

La base de données comprend 13 principaux types de crimes:

• crimes contre la personne : meurtre, viol, agression, agression grave, menace personnelle et traite des êtres humains (esclavage sexuel et travail des esclaves)
• crimes contre les biens : vol, entrée illégale, vol, vol, incendie criminel et dommages matériels / vandalisme

ainsi que (dans la base de données étendue que nous utiliserons) d'autres types d'infractions comme le trafic de drogue, la fraude et des contextes d'intolérance encore plus «exotiques» comme la prostitution, l'inceste ou la sodomie.

Types d'intolérance / motifs du crime

Conformément à la définition ci-dessus, les types d'intolérance suivants sont enregistrés dans la base de données:

1. contre la race (contre les blancs, contre les noirs, contre les asiatiques, contre les juifs, etc.)
2. contre l'ethnicité (contre les hispaniques)
3. contre la confession ou la vision religieuse du monde (contre les chrétiens, contre les athées, contre les musulmans, contre les Témoins de Jéhovah, etc.)
4. contre l'orientation sexuelle ou le genre (contre les homosexuels masculins et féminins, contre les hommes, contre les femmes, contre les personnes transgenres, etc.)
5. contre les limitations physiques (haine des handicapés)

De plus, chaque crime peut avoir jusqu'à 5 types différents d'intolérance comme mobile. Par conséquent, face à ces multiples caractéristiques, nous devrons élargir les catégories.

Catégories de victimes

Le programme enregistre les crimes contre les individus et les organisations, l'État ou même la société dans son ensemble, tout en mettant en évidence le nombre de personnes touchées. Nous ne considérerons que les cas avec des personnes blessées.



Donc, armé de Python avec des pandas ou de quelques autres bibliothèques (voir la section "Outils" dans mon article précédent ), et aussi sans oublier de sauter le café, le thé, la bière ou le kombucha (qui aime quoi) ... tirez le masque sur notre visage, mettez des gants chirurgicaux , réglage de la lampe opératoire et ...

Nous disséquons les données

Comme dans l'article précédent, je fais toutes les analyses dans un Jupyter Lab / Notebook en Python 3.8. Ici, je ne citerai ni ne commenterai le code lui-même - vous pouvez le télécharger à partir de ce lien (dans l'archive, il y a une liste et un fichier au format Jupyter Notebook). Concentrons-nous davantage sur les résultats que nous obtenons. Tous les graphiques sont cliquables .

Aperçu des données et listes principales

Après avoir chargé les données à partir du CSV (uniquement les colonnes nécessaires à la recherche), nous obtenons le dataframe suivant:

201403 lignes × 6 colonnes

Plus de 200 000 lignes et un peu plus de 8 Mo de mémoire. Examinons d'abord les 10 principaux crimes commis, les types d'intolérance (motifs), les races d'auteurs et les catégories de victimes: Alors, ce que nous voyons ici:

• Le type de crime le plus courant est le dommage à la propriété / le vandalisme , suivi de près par la menace personnelle (intimidation). Chacun de ces types de crimes représente près d'un tiers de tous les cas. Viennent ensuite les voies de fait, et les vols et autres crimes sont beaucoup moins courants.
• Parmi les types d'intolérance, l' intolérance envers les Noirs mène de loin (plus d'un tiers de tous les cas), puis par ordre décroissant, mais à peu près au même niveau: intolérance envers les juifs, intolérance envers les blancs, intolérance envers les gays. D'autres types d'intolérance sont statistiquement moins fréquents que le leader.
• 70% de tous les crimes sont commis par des blancs , environ 23% - par des noirs, le reste - «dans la marge d'erreur».
• Les crimes contre la personne représentent 80% de tous les cas.

En ne regardant que ces graphiques, on peut imaginer que presque tous les crimes sont blancs, menaçant les Noirs de violence ou gâtant leurs biens ... Cependant, voyons quels crimes et types d'intolérance sont les plus typiques pour chaque catégorie raciale de criminels:









Dans ce tableau:

• OFFENSE_COUNT - le nombre total de crimes commis par des représentants de cette race
• TOP_OFFENSE - le type de crime le plus courant pour les représentants de cette race
• TOP_BIAS - le type d'intolérance le plus courant (motif d'un crime) pour les représentants de cette race
• TOP_VICTIM - la catégorie de victimes la plus fréquente pour les représentants de cette race

Pour chaque catégorie typique, les pourcentages correspondants du nombre total de crimes commis par des membres de cette race sont également présentés.



Ici, vous pouvez voir que pour le noir et blanc, le motif principal est l'intolérance raciale envers les représentants de la race opposée (47% des crimes pour les deux races). Dans le même temps, les criminels blancs sont principalement engagés dans des menaces et des intimidations (37% des crimes), et les noirs - dans des attaques non aggravées (36% des crimes). (C'est incroyable quel pourcentage de coïncidence ces deux races trouvent!) En passant, seulement pour les criminels blancs, le principal type de crime n'est pas associé à des dommages physiques (menaces); les membres d'autres races sont plus susceptibles d'attaquer.



On peut également noter que les Asiatiques et les représentants des races mixtes (métis) montrent aussi, fondamentalement, l'aversion pour les Noirs, les Indiens et les Esquimaux pour les Blancs, mais les Hawaïens pour les «Gentils». Eh bien, cette statistique jusqu'à présent (pour moi personnellement) s'est avérée assez attendue.



Jetons un coup d'œil au nombre de crimes par année pour chaque race de criminels:







Comme prévu, les crimes des blancs et des noirs sur le graphique dominent le reste des races, pour lesquelles aucun changement n'est même visible en raison de la différence d'échelle. Le pic des Blancs tombe ici sur 1995-2002, et des Noirs - le début des années 1990. Depuis 2002, le nombre de crimes commis par des Blancs motivés par l'intolérance a diminué assez régulièrement, ayant chuté de 2 fois par rapport au pic de 2001; cependant, après 2016, il a recommencé à augmenter fortement. L'intolérance chez les Noirs s'est progressivement atténuée de 1995 à 2004, mais a ensuite commencé à croître tout aussi doucement, atteignant le niveau de 1995 en 2018.



Il est intéressant de noter ici que sous Barack Obama (dont on sait qu'il est afro-américain), c'est-à-dire de 2009 à 2017, le nombre de crimes parmi les blancs a très fortement baissé, mais dans le même temps le nombre de crimes parmi les noirs a montré une stabilité la taille. Plus tôt sous Bush (2001-2009), après le pic de crimes parmi les Blancs au cours de la première année de sa présidence, le nombre de crimes commis par des représentants des deux races est tombé sur le «plateau» et est resté pratiquement inchangé. Mais sous Clinton (1993 - 2001), les crimes parmi les Blancs ont augmenté rapidement, presque année après année, tandis que les crimes parmi les Noirs, au contraire, ont progressivement diminué.



Eh bien, nous avons examiné les principales tendances. Filtrons les données maintenant, ne laissant que l'essentiel pour une analyse plus approfondie.

Premier filtrage: par type de crime et victime

Selon la recherche présentée dans mon article précédent, effectuons un filtrage similaire des données pour analyse:

1. parmi les catégories de victimes, nous ne laisserons que les individus (exclure les crimes contre les organisations, les autorités et la société dans son ensemble);
2. parmi les types de crimes, nous ne laisserons que les meurtres, les agressions (graves et ordinaires), les vols et les viols comme les plus "méchants".

Voyons ce qui se passe:

16433 lignes × 6 colonnes

La filtration et l'agrégation des données ont permis de réduire le volume de 12 fois sans compromettre les facteurs importants pour l'analyse. Une nouvelle colonne COUNT à la fin contient le nombre de crimes pour l'année, l'état, la race du délinquant, le type de crime et le mobile.



En guise d'étape intermédiaire, regardons la répartition des crimes par race de criminels: et par types d'intolérance:















Ainsi, les criminels blancs et noirs représentent ensemble 93% de tous les cas (il y a deux fois plus de crimes parmi les Blancs, mais nous savons qu'il y a 5 fois plus de Blancs eux-mêmes). Il n'est donc pas du tout surprenant que la proportion soit presque la même en termes de types d'intolérance: 33% des crimes sont motivés par l'intolérance envers les Noirs, 18% - par l'intolérance envers les Blancs. Il est intéressant de noter ici au passage que les crimes motivés par l'intolérance envers les blancs sont quantitativement approximativement égaux aux crimes motivés par l'intolérance envers les homosexuels - c'est le troisième plus grand motif.

Deuxième filtrage: par race de criminels et mobile

La prochaine étape logique consiste à ne laisser que les criminels noirs et blancs et, par conséquent, uniquement les motifs «noirs et blancs» des crimes. Par cela, nous réduisons le sujet au racisme chez les Blancs et les Noirs. Après un filtrage supplémentaire, notre tableau de données ressemble à ceci:

3875 lignes × 6 colonnes

Il est temps d'inclure des indicateurs spécifiques dans l'analyse (par population pour chaque groupe racial). Pour ce faire, chargez les données de population à partir d'un fichier us_pop_1991-2018.csv.



Voyons comment la population globale des États-Unis est répartie par race (indicateurs annuels moyens pour 1991-2018): il y a 5,8 fois plus de Blancs que de Noirs. Toutes les autres races représentent 11% de la population. Ensuite, nous ajoutons des données sur le nombre à notre ensemble de données et calculons le nombre spécifique de crimes pour 1 million de représentants de chaque race. En gardant à l'esprit qu'après le premier filtrage, nous avons 4 types de crimes (meurtre, agression, vol et viol), regardons la répartition de ces crimes par les deux races en termes absolus et spécifiques:























Séparément pour les meurtres et les viols (puisqu'ils ne sont pas visibles sur les graphiques généraux): que voit-on ici? Et nous voyons ceci:

• Parmi les types de crimes analysés, les attaques sont de loin les plus importantes (25 fois plus que le vol qualifié, 250 fois plus que le meurtre et le viol).
• Il y a deux fois plus d'attaques faites par les Blancs, mais en termes de spécificité, les Noirs attaquent presque 3 fois plus souvent.
• Le nombre de vols commis par des noirs est 1,5 fois plus en chiffres absolus et 10 fois plus en chiffres spécifiques.
• Dans l'ensemble, les blancs ont commis un peu plus de meurtres que les noirs et à peu près le même nombre de viols. Concrètement, les noirs violent 6 fois plus souvent et tuent 3,6 fois plus souvent que les blancs. Entre le meurtre et le viol, les blancs "préfèrent" le meurtre, tandis que les noirs préfèrent le viol.

Crimes racistes par année

Voyons comment le nombre de crimes racistes commis par des Noirs et des Blancs a évolué sur toute la période: Il est facile de tirer des conclusions évidentes de ces graphiques:

• En moyenne, les Blancs commettent un peu plus de crimes racistes par an, mais 4 à 5 fois moins souvent en termes spécifiques (en d'autres termes, un Afro-Américain est 4 à 5 fois plus susceptible de commettre un crime raciste que les Blancs).
• Néanmoins, depuis les années 1990, la proportion de crimes racistes parmi les Noirs a progressivement diminué, ayant chuté de moitié en un quart de siècle.
• , , , . : , . , ( ) 1993 , , , , - .

Jetons un coup d'œil aux indicateurs généralisés (moyenne annuelle): une fois de plus, nous sommes convaincus des observations faites: en moyenne, les blancs commettent 15 à 16% de crimes racistes en plus, mais en même temps, en raison de la différence du nombre de blancs et de noirs, comme on le sait, 6 fois, les Noirs sont autant de fois plus susceptibles de commettre de tels crimes.

Est-ce seulement blanc contre noir, noir contre blanc?

Ajoutons le paramètre d'intolérance à nos indicateurs généralisés, i.e. mobile des crimes. Comme vous vous en souvenez, à la suite du filtrage, nous n'avons laissé que deux motifs: l'intolérance pour la race blanche et l'intolérance pour la race noire. Comment sont-ils répartis entre les criminels blancs et noirs? 100% polaire, bien sûr? Mais non! Bien sûr, la polarisation est évidente, mais il s'avère qu'il y a des crimes commis par des Noirs sur la base d'une hostilité raciale envers les leurs, et il en va de même pour les Blancs. (Je suis sûr qu'il y a aussi des crimes commis par des homosexuels motivés par la haine des homosexuels, par des femmes motivées par la haine des femmes, etc., parce que «l'homme» semble fièrement difficile; bien sûr, vous pouvez tout vérifier vous-même!)











Mais ce qui est curieux ici: la part des crimes commis par des noirs motivés par leur propre haine est de 11% de tous les crimes commis par des noirs, alors que pour les blancs ce chiffre est de 9%. Autrement dit, une personne noire a une chance légèrement plus élevée de se retourner contre son propre peuple.

Géographie des crimes

Enfin, regardons la répartition des crimes racistes dans les États américains. Pour calculer les indicateurs spécifiques, comme d'habitude, nous devrons charger le nombre par état et race à partir d'un fichier us_pop_states_race_2010-2019.csv.



Moyennes des États pour les Blancs et les Noirs: OK, rien de nouveau: la Californie, le Texas, la Floride et New York surpeuplés, où, comme vous avez pu le voir dans le dernier article, plus de crimes sont commis. Mais la proportion de la population noire est-elle partout la même - les fameux 13%? Voyons voir: donc, plus de la moitié de tout le District de Columbia (où se trouve le glorieux Pentagone Washington) est noire , environ un tiers est en coton



















États du sud - Mississippi, Louisiane, Géorgie, Alabama, Caroline du Sud et un nord (Maryland, où se trouve le district de Columbia, où la ville glorieuse ...); dans le reste, moins d'un quart. Cela étant dit, juste pour référence.



Et les crimes? Nous regardons les indicateurs annuels moyens en termes absolus et spécifiques:











On peut voir que l'État le plus peuplé, la Californie, est le chef de file du nombre absolu de crimes. Mais alors la Floride et le Texas ont été mis de côté par le Michigan, l'Illinois et le Maryland - les États du Nord économiquement les plus développés. Et sur le calendrier spécifique, les États les moins peuplés - Montana, Vermont, Idaho, Dakota du Nord et du Sud, Alaska (tous également dans le nord du pays) - sont en avance. Dans le même temps, il est clair que la proportion de crimes entre blancs et noirs n'est pas la même d'un État à l'autre, malgré la prédominance des noirs en termes d'indicateurs spécifiques (par exemple, le district de Columbia et Hawaï se distinguent du côté «blanc»).



Nous l'afficherons sur la carte (pour plus de clarté, nous remplacerons les indicateurs annuels moyens par le montant cumulé).



Premièrement en termes absolus:







Ici se distingue le nord-est du pays (en particulier le Michigan) plus la Californie et Washington sur la côte Pacifique. Et en termes spécifiques: la prédominance du nord avec les États les moins peuplés est perceptible ici: le district de Columbia, les deux Dakotas et tout de même Washington, ainsi que quelques États sur les côtés est et ouest. Dans le même temps, les États du sud ne présentent pas de criminalité significative au sein de la population. En général, si vous posez la question «Où verrai-je plus de crimes racistes?», Voir la première carte. Si votre question est "Où est le plus susceptible pour chaque personne de commettre un crime raciste?" - voir la deuxième carte. Je ne tirerai aucune autre conclusion concernant la distribution.

Au lieu de conclusions

Comment va Boulgakov? "Les faits sont la chose la plus têtue au monde." Si on nous dit quelque chose de tous les côtés, ce n'est pas nécessairement vrai - cela peut s'avérer être une demi-vérité ou un mensonge. Mais ayant des faits entre vos mains sous la forme d'un nombre N d'ensembles de données, vous pouvez vous-même confirmer ou réfuter certains arguments. Vous pouvez construire des hypothèses et les confirmer / réfuter par des méthodes statistiques, ou vous pouvez simplement considérer les données sans aucune hypothèse et y trouver des régularités, ce qui à son tour aidera soit à tirer des conclusions, soit à proposer des hypothèses pouvant être disséquées davantage. C'est à vous de tout prendre au mot ou de vérifier.



Bien sûr, cette petite analyse est loin d'être complète. Elle est exécutée superficiellement, car je n'ai considéré que les indicateurs de base, sans utiliser ne serait-ce qu'un quart de l'appareil disponible de statistiques mathématiques. Bien entendu, on peut discuter de la qualité des données initiales. Peut-on faire confiance à toutes les données enregistrées? Tous les crimes sont-ils enregistrés? Qui et comment détermine les motifs de l'intolérance? Mais quant à moi, je préfère analyser les données officielles ouvertes telles quelles plutôt que de me contenter d'affirmations telles que «la substance toxique X a été trouvée dans le sang de M. N» ou «le pays W a systématiquement violé les droits de l'homme depuis des décennies».



PSDans les commentaires sur mes recherches précédentes, on m'a souvent demandé de séparer «blanc pur» et «Latinos», car les cultures diffèrent. Cela ne me dérangerait pas, mais, malheureusement, cela ne peut être fait dans les deux cas en raison de la rareté des informations sur cette ethnie dans les données initiales. Ainsi, par exemple, dans les données que nous analysons dans cet article, sur 79514 crimes commis par des Blancs, seuls 6999 sont marqués d'ethnie, et seulement 489 sont marqués comme «hispaniques ou latino» (soit 0,6%). Bien entendu, ces données ne peuvent pas être utilisées pour l'analyse.