Skip to Content
logologo
AI Incident Database
Open TwitterOpen RSS FeedOpen FacebookOpen LinkedInOpen GitHub
Open Menu
Découvrir
Envoyer
  • Bienvenue sur AIID
  • Découvrir les incidents
  • Vue spatiale
  • Vue de tableau
  • Vue de liste
  • Entités
  • Taxonomies
  • Soumettre des rapports d'incident
  • Classement des reporters
  • Blog
  • Résumé de l’Actualité sur l’IA
  • Contrôle des risques
  • Incident au hasard
  • S'inscrire
Fermer
Découvrir
Envoyer
  • Bienvenue sur AIID
  • Découvrir les incidents
  • Vue spatiale
  • Vue de tableau
  • Vue de liste
  • Entités
  • Taxonomies
  • Soumettre des rapports d'incident
  • Classement des reporters
  • Blog
  • Résumé de l’Actualité sur l’IA
  • Contrôle des risques
  • Incident au hasard
  • S'inscrire
Fermer

Problème 4155

Incidents associés

Incident 8161 Rapport
Cross-Jurisdictional Facial Recognition Misidentification by NYPD Leads to Wrongful Arrest and Four-Year Jail Time in New Jersey

Loading...
Une victoire creuse dans la lutte pour apporter de la transparence sur l'utilisation de la technologie de reconnaissance faciale par la police
newjerseymonitor.com · 2024

Francisco Arteaga était incarcéré, en attente de comparaître devant un tribunal l’automne dernier, lorsqu’il a aperçu un énorme type qui le regardait de l’autre côté de la cellule de détention du palais de justice.

« Les bras de ce type sont comme ça, n’est-ce pas ? », a déclaré Arteaga, en traçant des biceps imaginaires de Popeye dans les airs. « Il n’a pas de cou. Il a une tête chauve et brillante. Il me regarde avec ce visage méchant. Je me suis dit : « Oh, mon Dieu ! » Il s’est dirigé vers moi. Il a dit : « Votre nom est Arteaga ? » J’ai dit : « Ouais. » Il a ouvert ses grands bras et m’a serré dans ses bras. Il a dit : « Merci, merci beaucoup ! Grâce à votre affaire, je rentre chez moi ! »

Cela fait 14 mois que le tribunal a rendu Arteaga célèbre, du moins parmi les défenseurs des droits civiques, les avocats de la défense du New Jersey et les accusés qui se sont retrouvés dans des ennuis judiciaires à cause de la technologie de reconnaissance faciale.

La police s'est appuyée sur cette technologie pour identifier Arteaga comme principal suspect dans le vol à main armée de 2019 d'un magasin de téléphonie mobile du comté de Hudson. Il a nié toute implication, la police n'avait que peu d'autres preuves et Arteaga, originaire du Queens, a déclaré qu'il n'était même jamais allé dans le New Jersey. Mais les autorités l'ont quand même inculpé parce qu'un logiciel de reconnaissance faciale a révélé que sa photo d'identité correspondait à des images granuleuses du voleur prises par des caméras de surveillance.

Arteaga a contesté son arrestation et a exigé des informations détaillées sur la technologie sur laquelle la police s'est appuyée pour identifier un suspect, dans le but d'exposer ses failles et de s'exonérer. Il a gagné, grâce à une décision d'appel de l'État l'année dernière](https://www.njcourts.gov/system/files/court-opinions/2023/a3078-21.pdf) qui lui a permis d'obtenir ces documents par le biais de la communication préalable.

Cette décision aurait pu être un tournant pour les réformateurs de la justice pénale, offrant de l’espoir aux accusés comme Arteaga et son grand compagnon de cellule chauve qui ont été inculpés dans des affaires autrement fragiles en raison de telles déductions numériques.

Mais au moins dans le cas d’Arteaga, les procureurs ont déclaré qu’ils ne pouvaient pas fournir de détails sur la technologie de reconnaissance faciale qui a conduit à ses accusations, en grande partie parce que la correspondance a été faite dans un autre État – en dehors de leur juridiction et de la portée de la cour d’appel du New Jersey.

À ce moment-là, Arteaga était derrière les barreaux en tant que détenu provisoire depuis près de quatre ans. Plutôt que de rester en prison pour continuer son combat, il a plaidé coupable, l’esprit tourné vers son jeune fils, sa fille adolescente et sa fiancée.

« Je me dis, est-ce que je veux prendre le risque de savoir que j’ai des enfants là-bas ? En tant que père, je vois mes enfants souffrir. Je souffre, mais je pourrais souffrir, n’est-ce pas ? Je pourrais faire face à cela. Mais quand je vois que ma souffrance affecte mes enfants, je dois être père. « J’ai pu rentrer chez moi et retrouver mon enfant », a-t-il déclaré.

L’expérience d’Arteaga révèle des lacunes en matière de réglementation et de surveillance qui se creusent à mesure que les forces de l’ordre se tournent de plus en plus vers de nouveaux outils technologiques pour résoudre des affaires où les enquêtes traditionnelles ont échoué, a déclaré Dillon Reisman, avocat à l’American Civil Liberties Union du New Jersey. Reisman est spécialisé dans la surveillance, l’intelligence artificielle et d’autres nouvelles technologies.

L’inaction des décideurs politiques pour combler ces lacunes met tout le monde en danger d’arrestation et de poursuites injustifiées, a ajouté Reisman.

« Ce dont cette affaire nous a vraiment mis en garde, c’est de la menace d’un pouvoir de surveillance incontrôlé et de l’acquisition de toute cette technologie de surveillance sans cadre de responsabilisation », a déclaré Reisman. « Tous ces systèmes, de par leur nature, impliquent une coopération entre États et des systèmes qui sont plus grands qu’une seule agence individuelle, ce qui rend extrêmement difficile toute forme de transparence, d’apprendre comment le système est utilisé, d’apprendre en quoi le système pourrait être défectueux et de s’y opposer. »

La police de l'ouest de New York a accusé Francisco Arteaga d'un vol à main armée au magasin Buenavista Multiservices sur Bergenline Avenue. (Dana DiFilippo | New Jersey Monitor)

La décision d'appel explique comment Arteaga s'est retrouvé dans le collimateur des forces de l'ordre.

Le lendemain de Thanksgiving en 2019, un homme armé a braqué le magasin Buenavista Multiservices sur Bergenline Avenue à West New York, frappant un employé avec un pistolet et s'échappant avec 8 950 $. L'employé a décrit le voleur comme un « homme hispanique portant un chapeau noir en forme de crâne ».

Les policiers de West New York ont soumis des images des caméras de surveillance du magasin et de la zone pour analyse de reconnaissance faciale au New Jersey Regional Operations Intelligence Center, une division de la police d’État. Un enquêteur n’a trouvé aucune correspondance, mais a proposé de répéter l’enquête si les détectives produisaient une meilleure image.

Au lieu de cela, les détectives ont envoyé les images brutes au Real Time Crime Center du département de police de New York. Un détective a capturé plusieurs images fixes, les a comparées aux bases de données du centre et a identifié la photo d’Arteaga en décembre 2019 comme une « correspondance possible ». Deux employés du magasin – dont un qui n’était pas au magasin au moment du vol – ont confirmé qu’Arteaga à partir d’une série de photos était le voleur. La photo d’Arteaga figurait dans le système du NYPD depuis deux condamnations des années plus tôt pour des délits autres que le vol à main armée à New York.

La décision des détectives de confier l’affaire au NYPD a montré qu’ils avaient « fait du lèche-vitrine pour trouver un suspect », a déclaré Arteaga.

« La police a dit : « Bon, vous savez quoi, envoyons-le à New York sans raison documentée de le faire. Nous allons abandonner les professionnels de notre État et nous allons aller dans un autre État et commencer à chercher dans leur bassin dès maintenant », a déclaré Arteaga.

L'arrestation ratée du comté d'Essex montre la nécessité d'une meilleure divulgation des fautes policières, disent les défenseurs

Arteaga avait un alibi. Il a dit à la police qu'il rendait visite à des proches à Croton-on-Hudson dans le comté de Westchester le jour du vol. Mais la police l'a quand même inculpé et un juge a ordonné qu'il soit détenu à la prison du comté d'Hudson jusqu'à son procès.

Son avocat a déposé une requête demandant des informations sur le logiciel de reconnaissance faciale qui a identifié Arteaga, notamment son nom, son fabricant, ses algorithmes, ses taux d’erreur et son code source, ainsi que les qualifications de l’analyste qui a effectué la recherche, des détails sur la base de données de photos d’identité où l’analyste a obtenu la photo d’Arteaga, et toute modification apportée par l’analyste aux images de surveillance pour améliorer les chances d’une correspondance.

Le juge de première instance a rejeté la requête en mai 2022 et Arteaga a fait appel. En juin 2023, un panel d’appel composé de trois juges s’est rangé du côté d’Arteaga et a renvoyé l’affaire au tribunal de première instance, ordonnant au juge d’ordonner aux procureurs de fournir les informations demandées par la défense.

« Ici, les éléments recherchés par la défense ont un lien direct avec le test de la fiabilité de FRT et portent sur la culpabilité ou l’innocence du défendeur. Étant donné la nouveauté de FRT, personne, y compris nous, ne peut raisonnablement conclure sans la découverte si les preuves sont disculpatoires ou « simplement des preuves potentiellement utiles » », a écrit le juge Hany Mawla.

Les tribunaux doivent s’efforcer de comprendre les nouvelles technologies et de permettre à la défense de les examiner pleinement, a écrit Mawla, citant une décision d’appel de l’État de 2021. (https://law.justia.com/cases/new-jersey/appellate-division-published/2021/a4207-19.html)

« Le défendeur doit disposer des outils nécessaires pour mettre en cause la thèse de l’État et semer un doute raisonnable », a-t-il écrit.

Les procureurs n’ont pas fait appel de la décision, ce qui signifie qu’elle a désormais force de loi.

Tamar Lerer dirige l’unité de science médico-légale du Bureau du défenseur public du New Jersey. (Dana DiFilippo | New Jersey Monitor)

Les avocats du bureau de la défense publique de l’État qui représentent les accusés identifiés par un logiciel de reconnaissance faciale disent avoir rencontré le même problème qu’Arteaga – les procureurs insistant, malgré leur devoir constitutionnel de fournir des preuves à décharge à la défense, sur le fait qu’ils n’ont aucune information sur la technologie sous-jacente à leurs affaires, a déclaré Tamar Lerer, qui dirige l’unité de science médico-légale du bureau.

« C’est une violation de la procédure régulière de ne pas les fournir », a déclaré Lerer. « L’État utilise toujours la reconnaissance faciale et je sais que les avocats ne reçoivent pas cette découverte, et lorsqu’ils la demandent, on leur dit qu’ils peuvent se faire assigner à comparaître. Nous avons donc un problème systémique avec le non-respect de cette décision. »

Ajoutant à la complexité, certains développeurs de reconnaissance faciale exigent que les clients signent des accords de non-divulgation pour protéger leurs produits des concurrents. Ce secret a donné lieu à plusieurs poursuites judiciaires contre la police de New York, qui a reçu l’ordre en 2022 de divulguer des informations, et qui ont montré que le département avait utilisé Clearview AI, une technologie de reconnaissance faciale controversée que l’ancien procureur général du New Jersey Gurbir Grewal a interdite en 2020.

« Les services de police sont parfaitement conscients qu’ils utilisent des outils de confidentialité », a déclaré Arteaga. « Donc, lorsqu’ils utilisent la recommandation d’un logiciel basé sur le secret pour cibler quelqu’un, cette personne ciblée n’a aucune chance. »

Lerer a déclaré que son bureau « attend de voir ce qui va suivre ».

« La défense n’est pas censée être une agence de régulation », a-t-elle déclaré.

Le propriétaire du magasin de West New York n’a pas répondu à la demande de commentaires du New Jersey Monitor, et une porte-parole du bureau du procureur du comté de Hudson a refusé de commenter.

En février 2022, le bureau du procureur général du New Jersey a commencé à solliciter l’avis du public sur la technologie de reconnaissance faciale pour aider à façonner une politique à l’échelle de l’État sur son utilisation par les forces de l’ordre. Aucune mesure n’a été prise depuis la sollicitation de commentaires publics, a déclaré Michael Symons, porte-parole du bureau du procureur général Matt Platkin.

Le bureau ne suit pas le nombre d’agences du New Jersey qui utilisent cette technologie, a ajouté Symons.

Reisman a déclaré que la nécessité pour les décideurs politiques d’agir devenait de plus en plus urgente à mesure que l’industrie se développait.

« La reconnaissance faciale est un domaine de recherche en informatique depuis plus de 30 ans, mais au cours de la dernière décennie, nous avons assisté à une explosion du nombre d’entreprises offrant ces services et du financement fédéral pour les gouvernements locaux et étatiques pour acquérir ces systèmes. Beaucoup d’argent est investi dans ces outils sans beaucoup de réflexion préalable sur le type de contrôles et de garanties dont nous avons besoin », a déclaré Reisman. « C’est une situation terrifiante pour l’État. »

Francisco Arteaga (Dana DiFilippo | New Jersey Monitor)

Arteaga se considère comme un « otage » du temps qu’il a passé derrière les barreaux, où les conditions peuvent être notoirement épouvantables. Depuis sa sortie en novembre, il s’efforce de reconstruire sa vie.

Il étudie la médecine holistique en ligne, vend des produits de santé et de nutrition et travaille comme professeur de gym dans un centre pour personnes âgées dans le Queens. Il vit désormais à Union City pour mieux organiser ses réunions mensuelles avec son agent de libération conditionnelle et voit son fils et sa fiancée, qui vivent toujours dans le Queens, toutes les quelques semaines.

Bien qu’il ait gagné son appel, a-t-il dit, c’était un peu comme gagner la bataille mais perdre la guerre.

« Les gens me disent : « Hé, tu as eu une bonne affaire avec ton cas. Pourquoi ne t’es-tu pas battu jusqu’au bout ? » », a déclaré Arteaga. « Je leur ai demandé : « Que ferais-tu si tu étais moi ? » »

Il espère que quelqu’un d’autre reprendra le combat.

« J’ai placé le putt assez près pour que quelqu’un d’autre le rentre », a-t-il déclaré.

Lire la source

Recherche

  • Définition d'un « incident d'IA »
  • Définir une « réponse aux incidents d'IA »
  • Feuille de route de la base de données
  • Travaux connexes
  • Télécharger la base de données complète

Projet et communauté

  • À propos de
  • Contacter et suivre
  • Applications et résumés
  • Guide de l'éditeur

Incidents

  • Tous les incidents sous forme de liste
  • Incidents signalés
  • File d'attente de soumission
  • Affichage des classifications
  • Taxonomies

2024 - AI Incident Database

  • Conditions d'utilisation
  • Politique de confidentialité
  • Open twitterOpen githubOpen rssOpen facebookOpen linkedin
  • e1b50cd