Dans un an, nullité des décisions administratives en cas de silence sur les algorithmes utilisés

Dans un an, nullité des décisions administratives en cas de silence sur les algorithmes utilisés

Si tu reviens, j'annule tout

Avatar de l'auteur
Xavier Berne

Publié dans

Droit

01/07/2019 6 minutes
19

Dans un an, nullité des décisions administratives en cas de silence sur les algorithmes utilisés

À compter du 1er juillet 2020, soit dans un an jour pour jour, les décisions administratives prises sur le seul fondement d’un algorithme seront frappées de nullité, dès lors qu’elles ne contiendront pas de « mention explicite » relative à la transparence des algorithmes publics.

« À quoi cela sert-il de créer ou de déclarer des droits si le citoyen n'en est pas informé et si, finalement, ces droits restent lettre morte ? » avait tonné la sénatrice Sophie Joissains, l’année dernière, lors des débats sur le projet de loi relatif aux données personnelles.

Et pour cause : depuis le 1er septembre 2017, en application de la loi pour une République numérique, toutes les décisions administratives prises « sur le fondement d'un traitement algorithmique » doivent être accompagnées d’une « mention explicite » informant l’usager qu’un programme informatique est venu s’immiscer dans la gestion de son dossier.

Taxe d’habitation, allocations familiales, bourses scolaires, impôts sur le revenu, affectation de fonctionnaires, demandes de places en crèche, etc. En théorie, chacune de ces décisions individuelles devrait se conclure par quelques lignes, informant surtout le citoyen que l’administration a différentes obligations de transparence à respecter dès lors qu’elle recourt à des algorithmes.

Des obligations de transparence qui restent largement ignorées

Les citoyens sont effectivement en droit de demander à connaître les « règles » et « principales caractéristiques » de mise en œuvre du traitement algorithmique utilisé à leur encontre. L’administration doit alors leur fournir, « sous une forme intelligible et sous réserve de ne pas porter atteinte à des secrets protégés par la loi » (de type secret défense), les informations suivantes :

  • Le « degré et le mode de contribution » du traitement algorithmique à la prise de décision
  • Les données traitées et leurs sources
  • Les « paramètres de traitement et, le cas échéant, leur pondération, appliqués à la situation de l'intéressé »
  • Les opérations effectuées par le traitement

L’objectif de ces dispositions ? Permettre au grand public de mieux comprendre comment l’algorithme en est arrivé à tel résultat à leur encontre. Les codes sources étant en effet d’ores et déjà considérés comme des documents administratifs « communicables » au citoyen, sur demande, le législateur a souhaité que les administrations explicitent en quelque sorte ces lignes de code.

Dans l’étude d’impact annexée au projet de loi Numérique, le gouvernement de Manuel Valls expliquait que cette réforme permettrait par exemple d’y voir plus clair sur le fonctionnement d’Admission Post-Bac, le prédécesseur de Parcoursup : « Le recours à ce logiciel, reposant sur des traitements algorithmiques, peut susciter des interrogations sur les mécaniques et les règles de fonctionnement qui conduisent à un résultat décisif pour l’avenir des étudiants : comment ce système est-il paramétré ? Quelle est la part de tirage au sort dans la procédure d’affectation pour les filières les plus demandées ? Comment s’assurer qu’il n’est pas possible de « tricher » avec le système ? »

Seul hic : difficile de trouver aujourd’hui la moindre « mention explicite » dans les millions de décisions adressées par les impôts, les Allocations familiales ou même Pôle emploi. Une situation sur laquelle les institutions concernées refusent curieusement de s’exprimer...

À notre connaissance, seule l’Éducation nationale intègre à ce jour une « mention explicite » relative aux traitements algorithmiques qu’elle déploie pour le système d’affectation des lycéens Affelnet (visiblement avec quelques difficultés, comme l'illustre le tweet ci-dessous...).

Une nullité « par défaut » à partir du 1er juillet 2020

L’année dernière, lors des débats sur le projet de loi relatif aux données personnelles, la rapporteure Sophie Joissains avait ainsi fait adopter un amendement prévoyant qu’en l’absence de « mention explicite », les décisions concernées soient systématiquement considérées comme nulles !

Estimant qu’il était « tout à fait disproportionné » d’aller aussi loin, le gouvernement avait toutefois réussi à rectifier partiellement le tir, à l’Assemblée nationale. D’une part, en reportant l’entrée en vigueur de cet amendement au 1er juillet 2020 (ce qui ne manque pas de piquant étant donné que l’obligation portée par la loi Lemaire est théoriquement en vigueur depuis septembre 2017). D’autre part, en limitant cette nullité automatique aux décisions 100 % automatisées.

Autrement dit, les décisions dans lesquelles il reste une intervention humaine ne seront pas concernées par cette réforme. Or il reste bien difficile de savoir à l’heure actuelle quels sont les algorithmes utilisés par les administrations, et surtout quel est leur degré d’immixtion dans la prise de décision – objet même des obligations de transparence introduites en 2017...

Au travers d’un guide dédié aux algorithmes publics, la mission Etalab indique aux acteurs publics qu’elle se tient à leur disposition pour « recenser les algorithmes potentiellement concernés par l’obligation de transparence et de redevabilité ». L’institution ajoute que « d’autres contenus seront prochainement publiés pour compléter ce guide, notamment des fiches pratiques sur une méthodologie d’identification des algorithmes ainsi que des exemples de mention et d’information détaillée ».

Dernière précision : cette nullité automatique ne prévaudra qu’en l’absence de « mention explicite ». Le fait de ne pas répondre aux demandes d’explicitation des citoyens n’est en ce sens passible d’aucune sanction.

Des décisions d'ores et déjà annulables

En attendant le 1er juillet 2020, rappelons que le Conseil constitutionnel a invité le juge administratif à annuler toute décision administrative 100 % automatisée et dépourvue de « mention explicite » (voir notre article).

Les « Sages » sont même allés plus loin en jugeant, en se penchant sur le fameux projet de loi relatif aux données personnelles, que « le seul recours à un algorithme » obligeait l’administration à dévoiler les « principales caractéristiques de mise en œuvre de ce dernier », sur demande. Si la protection d’un secret (données personnelles, secret défense...) fait juridiquement obstacle à la transparence, alors « aucune décision individuelle ne peut être prise sur le fondement exclusif de cet algorithme », a ajouté le juge.

Écrit par Xavier Berne

Tiens, en parlant de ça :

Sommaire de l'article

Introduction

Des obligations de transparence qui restent largement ignorées

Une nullité « par défaut » à partir du 1er juillet 2020

Des décisions d'ores et déjà annulables

Fermer

Commentaires (19)


Ca marche avec #Parcourssup ?( <img data-src=" /> )


Pas sûr, vu qu’il est notoire que Parcourssup est automatisé. En tous cas, il suffit que ça soit indiqué sur le portail (mais je ne peux pas confirmer si c’est le cas, à mon époque c’était le combo magique 3614 RAVEL et 3615 CANDIDUT <img data-src=" />)


Le code source du Parcoursup a été publié voilà plus d’un an, et ses concepteurs en ont expliqué le principe :https://www.sciencesetavenir.fr/high-tech/informatique/bac-2018-l-algorithme-de-…


je parle des algos “locaux” qui sont totalement arbitraires&nbsp; ( cf cet article d’un site éponyme https://www.nextinpact.com/news/107971-le-conseil-detat-soppose-a-communication-algorithmes-locaux-parcoursup.htm )


if ( $candidat == “ blanc ” ) { engage(); }

else { poubelle(); }








skankhunt42 a écrit :



if ( $candidat == “ blanc ” ) { engage(); }

else { poubelle(); }





Ca me gonfle ce genre de truc bobo gaucho. Faut arrêter un peu le délire de persécution. Suffit de voir le nombre de binationaux au gouvernement pour s’en rendre compte, rien qu’en comparaison des autres pays. La couleur de la peau ou les origines ethniques sont loin d’être LE facteur d’échec, mais si cela arrange bien certains discours haineux envers notre société.



Ce genre de réponse d’égoïste de droite ca me gonfle. Faut arrêter un peu le délire du monde de oui-oui. Suffit de voir les rapports émis par



Le défenseur des droits ( cette infâme islamo gauchiste de Toubon ) : https://www.defenseurdesdroits.fr/sites/default/files/atoms/files/etudesresultats-acces_a_lemploi_et_discriminations_liees_aux_origines-20160919_0.pdf Et en 2019 ca ne s’améliore pas



Le point, ce vile repère de bobo qui reprend une enquête de SOS racisme : https://www.lepoint.fr/societe/logement-les-discriminations-raciales-prosperent-en-ile-de-france-07-05-2019-2311205_23.php



Et puis enfin une enquête de l’Agence Européenne des droits Fondamentaux : https://www.levif.be/actualite/europe/les-personnes-noires-trop-souvent-victimes-de-discrimination-raciale-dans-l-ue/article-normal-1060031.html?cookie_check=1561993205 <img data-src=">



Mais sinon aucune raison de penser que ca n’arrivera pas avec des algorithmes locaux (Parcours Sup) qui sont cachés, non communicable hein de même que lors d’un entretien d’embauche .. #coucouNXI #teamCADA




(…) D’autre part, en limitant cette nullité automatique aux décisions 100 % automatisées.



Autrement dit, les décisions dans lesquelles il reste une intervention humaine ne seront pas concernées par cette réforme. (…)





Ouais mais… décisions 100% auto ou bien procédures 100% auto ?

parce que décision = ponctuel (par exemple décision à propos de l’impôt d’un seul contribuable)

et procédure = tout le monde (décisions pour les impôts de tout le monde)

? ? ?

Est-ce qu’on peut n’annuler que certaines décisions parmi toutes celles ayant suivi une même procédure (tantôt 100% auto, tantôt avec intervention humaine) sans que ce soit de la bonne grosse discrimination ? un peu comme du bon gros rouge qui pique et qui tâche ? <img data-src=" />



Et puis “intervention humaine”, c’est à mourir de rire puisque ce sont les contribuables, allocataires, étudiants, etc. (= humains) qui déclarent leurs revenus, leurs souhaits, etc. à l’algorithme qui ensuite décide de leur impôt, leur alloc, leur orientation… et c’est pareil pour toutes les “décisions”, hein…

<img data-src=" />








romainsromain a écrit :



Ce genre de réponse d’égoïste de droite ca me gonfle. Faut arrêter un peu le délire du monde de oui-oui. Suffit de voir les rapports émis par



Le défenseur des droits ( cette infâme islamo gauchiste de Toubon ) : https://www.defenseurdesdroits.fr/sites/default/files/atoms/files/etudesresultats-acces_a_lemploi_et_discriminations_liees_aux_origines-20160919_0.pdf Et en 2019 ca ne s’améliore pas



Le point, ce vile repère de bobo qui reprend une enquête de SOS racisme : https://www.lepoint.fr/societe/logement-les-discriminations-raciales-prosperent-en-ile-de-france-07-05-2019-2311205_23.php



Et puis enfin une enquête de l’Agence Européenne des droits Fondamentaux : https://www.levif.be/actualite/europe/les-personnes-noires-trop-souvent-victimes-de-discrimination-raciale-dans-l-ue/article-normal-1060031.html?cookie_check=1561993205 <img data-src=">



Mais sinon aucune raison de penser que ca n’arrivera pas avec des algorithmes locaux (Parcours Sup) qui sont cachés, non communicable hein de même que lors d’un entretien d’embauche .. #coucouNXI #teamCADA





if ( \(candidat == "minorité protégée" OR \)candidat == “risque de bad buzz” OR $candidat == “sommité” ) { engage();

&nbsp;}else {

NousVousRappelleronsPlusTard();

&nbsp;}



WARNING :Je parle aussi des algo locaux !!



Ce genre de reponses demago generalistes ca me gonfle.



Dire qu’une probleme n’existe pas est exactement la meme chose que dire qu’un probleme existe dans 100% des cas, c’est de la demagogie. La realite est beaucoup plus nuance, mais c’est sur que dans une reponse faites en 2 minutes sur internet c’est difficile de faire l’effort d’une approche honnete et prenant en compte la variete des situations.&nbsp;








romu79 a écrit :



Ça me gonfle ce genre de truc bobo gaucho. Faut arrêter un peu le délire de persécution. Suffit de voir le nombre de binationaux au gouvernement pour s’en rendre compte, rien qu’en comparaison des autres pays. La couleur de la peau ou les origines ethniques sont loin d’être LE facteur d’échec, mais si cela arrange bien certains discours haineux envers notre société.





J’ai bossé dans une boite ou le patron à refusé un entretiens avec une nana parce qu’elle était noir et qu’un mec venais de banlieue. J’ai aussi été victime de discrimination lors de ma recherche de logement sur bordeaux, parce que j’étais un parisien.



ps : Je trouve cette forme de discrimination “normale” dans le sens ou bien souvent la “gène” sera réelle statistiquement parlant. Car si cette discrimination existe&nbsp; elle est bien due à quelque chose et ce n’est pas un mythe urbain.

&nbsp;





romainsromain a écrit :



Le point, ce vile repère de bobo qui reprend une enquête de SOS racisme : https://www.lepoint.fr/societe/logement-les-discriminations-raciales-prosperent-en-ile-de-france-07-05-2019-2311205_23.php





C’est statistiquement logique, sorry not sorry.

&nbsp;





romainsromain a écrit :



Et puis enfin une enquête de l’Agence Européenne des droits Fondamentaux : https://www.levif.be/actualite/europe/les-personnes-noires-trop-souvent-victimes-de-discrimination-raciale-dans-l-ue/article-normal-1060031.html?cookie_check=1561993205 <img data-src=">





J’ai du être victime / témoins de plus de 50 d’agressions au cours de ma vie et à chaque fois c’était par des gens de couleur ( noir / arabe ) avec un dress code particulier ( survet / wesh ). Du coup il est tout à fait normal de change de trottoir si une personne au loin correspond à ce profil.



Ce qui veut dire plus ou moins que si vous êtes noir / arabe le mieux est de vous habiller autrement qu’en racaille pour subir moins de discrimination.



ps : Si tu veut débattre la dessus c’est pour trouver une solution, car la faute à la france de laisser tomber des millions de gamins des banlieue, et même en temps que blanc privilégié le moindre faux pas peut également couter très cher, bien trop cher même et c’est ce qui génère cette discrimination, qu’a un point ou il faut être une autre personne pour aller travailler.



Comment cela sera possible en pratique ? A moins de code et de paramètres très simple en entrée.


Je vais être direct : ce commentaire est profondément débile.&nbsp;



S'il y a discrimination, positive ou négative, ce sera toujours par facteur humain, PAS algorithmique.&nbsp;      






Et sinon...      

"Estimant qu’il était «&nbsp;tout à fait disproportionné&nbsp;» d’aller aussi loin, le gouvernement avait toutefois réussi à&nbsp;rectifier partiellement le tir, à l’Assemblée nationale. D’une part, en reportant l’entrée en vigueur de cet amendement au 1er juillet 2020 (ce qui ne manque pas de piquant étant donné que l’obligation portée par la loi Lemaire est théoriquement en vigueur depuis septembre 2017). D’autre part, en limitant cette nullité automatique aux décisions 100 % automatisées."

Bah HEUREUSEMENT BORDEL !

La députée est d'une bêtise sans nom.&nbsp;

ET l'article à charge est malheureux également.&nbsp;






Pourquoi les administrations ne communiquent pas ? Tout simplement, selon toute probabilité, parce qu'elles en ont pour la plupart pas la moindre idée !&nbsp;      

Entre la complexité des règles de gestion en soi (pour lesquelles je ne suis pas sûr que grand monde maîtrise réellement toutes les intrications), la manière dont celles-ci sont traduites dans une application métier, et la manière dont le calcul et son résultat sont retranscrits aux utilisateurs...






Je subodore que pour un certain nombre "d'administrateurs" c'est aussi opaque que pour les administrés.&nbsp;      

Et autant je suis à 150% pour le fait de mettre un coup de pied dans la fourmilière (la loi Numérique), autant là on a essayé de la vaporiser à coup de bombe nucléaire.&nbsp;






Rappel : la fonction publique est systématiquement pilonnée depuis des années en employant de très mauvaises méthodes (réduction des effectifs et des moyens) pour lutter contre un problème réel (inefficacité au pire, "simple" lenteur au mieux, manque de réactivité et d'adaptation au changement en général).      

Dans les faits, en tout cas pour ce que j'en vois actuellement (en tant que contractuel), l'informatique souffre de la contradiction d'être à la fois considérée comme la réponse à tous les problèmes et en même temps (comme dirait l'autre) un truc bête et méchant qui ne réclame aucun moyen particulier.&nbsp;



Aujourd’hui les décideurs commencent tout juste vaguement à prendre conscience de la criticité de l’outil informatique (ils en ont l’intuition mais considèrent toujours que c’est un truc simple et donc “digne de dactylographeurs” pour forcer le trait, genre “il suffit de claquer des doigts les ordis font tout”)




Et pourtant, j'ai pu voir ou entendre parler de projets dignes de l'informatique des années 80.      

----&gt; Forcer la main en mode "il nous les faut pour hier (ça revient à ça concrètement)" conduirait juste soit à l'ignorance faute de moyens (et donc un bordel administratif grave et des contentieux dans tous les sens par la suite soit encore plus de coûts et pertes de temps pour tout le monde) soit au mieux à une information à l'arrache qui sert à rien pour l'administrable faute d'avoir été conçue proprement.






La conduite du changement ne se fait jamais en un jour.&nbsp;      

À l'échelle d'une administration, à fortiori perclue du dogme de centralisation, ça ne se fait même pas en moins d'un quinquennat, et encore il faudrait pour cela une vraie stabilité politique.&nbsp;

Il faut accepter d'être patient (en vrai, j'aurais bien des idées à proposer pour régler le vrai problème de fond de l'administration - les arrivistes incompétents qui pourrissent tout - mais je doute que ça passe XD... Du coup obligé d'attendre le renouvellement générationnel).&nbsp;&nbsp;&nbsp;

Pour en revenir aux algo locaux de parcoursup, en deux mots il fait deux choses:





  • il prend les notes (et aussi les remarques des profs …) et les pondère. Ca permet de classer les gens au sein d’une classe ou d’un établissement de manière presque propre, car en général la manière d’évaluer est correctement harmonisé au sein d’un établissement.

  • mais il pondère aussi ton score en fonction de l’établissement d’ou tu viens ( je l’ai personellement vérifié dans tous les établissement sur lesquel j’ai pu avoir de l’info interne, oui, ca veut dire 9 seulement mon réseau est pas infini )



    Le deuxième point est une réponse pratique à un vrai problème, les établissement ne notent pas pareil entre eux car ils s’adaptent à leur élève et heureusement. Oui, mais ca signifie aussi qu’avec ce système de poids des ‘bon’ de ‘bon’ établissement peuvent se retrouver avec un score plus élevé qu’un élève 2020 partout d’un établissement&nbsp; ‘mauvais’. Et bien sur ce ‘score’ des établissement formateur est caché par les établissement recruteur, ce qui crée des barrières sociales ( demande à tante bidule qui est prof d’aller espionner pour toi … )



    D’un point de vue individuel ( élève ), il faut pouvoir avoir accès a ces info, d’un point de vu établissement, l’accès à ces info contribuera à renforcer la ségrégation sociale entre établissement.



    Pour moi ce genre problème ( qui a mon sens n’a pas de solution ) montre les limites de la sélection sur dossier et du contrôle continu. Si on évalue tous le temps, comme on doit standardiser cette évaluation pour la rendre équitable, on ne peut plus tolérer de s’adapter aux élèves ( et réciproquement adaptation entraîne inéquité ).



    Sinon il sert encore à qqch le bac?



    Ok je suis sans doute hors sujet, mais bon, c’est un commentaire quoi …


Alors une réponse en 2 temps :





  1. moi et mes réponses débiles on te dit bien des choses … https://lejournal.cnrs.fr/articles/la-justice-a-lheure-des-algorithmes-et-du-big-data

    “Contrairement à une idée reçue, les algorithmes peuvent aussi reproduire et amplifier les biais de l’esprit humain, notamment parce qu’ils s’appuient sur des décisions subjectives et ne font pas de choix par eux-mêmes.”



    Donc oui excuse moi de trouver ca pertinent d’exiger comme dans le cas de parcours sup d’avoir le détail des algorithmes locaux, et dans n’importe quelle situation exiger la transparence sur les décisions. C’est un impératif démocratique

    &nbsp;

  2. Par contre pour être en informatique dans l’état mais en tant que titulaire, le problème est la réduction des effectifs qui se fait sur le départ à l’ancienneté alors qu’il faudrait virer les boulets, les vrai : ceux qui ont X notes de services, qui pourrissent un service dès qu’ils arrivent, …&nbsp; et à l’inverse valoriser ceux qui ont des compétences mais à qui l’ont dit “toi tu es X donc tu te contente de faire X”



    Bref, tout ca pour dire que non ca n’est pas une débilité d’exiger la transparence ! NXI c’est toujours engagé pour cela ( je crois que la CADA&nbsp; pleure à chaque fois en les voyant ). Et moi je suis raccord sur cette ligne, La transparence est une règle saine de démocratie.


j’espère que cela va s’appliquer aux nouvelles amendes de stationnement / nouveaux radars de la mort qui tue !


Tu sembles dire que le modèle républicain qui consiste à échelonner la notation à un niveau national est une chimère, car le niveau n’est pas égal au sein de la nation, car l’échelle de notation n’est pas égale au sein de la nation, car le niveau n’est pas égal au sein de la nation, car l’échelle de notation…



Comment dire… C’est le serpent qui s’mord la queue. Si on veut effacer les iniquités d’accès à l’apprentissage, à la formation et à l’emploi, il faut d’abord s’assurer que tous les établissements notent de la même façon.



Alors, oui, ça implique du coup de remettre en question l’élitisme de certains établissements, l’état de délabrement de certains établissements, et bien d’autres points de souffrance.


Oula, je ne suis pas aussi radical ( enfin j’espère ).



Simplement, je pointe la contradiction entre deux mission du système éducatif:




  • pour évaluer des gens il faut une évaluation normalisé, standard, identique partout

  • pour enseigner au gens avec un minimum d’efficacité il faut aller au rythme le plus efficace qui n’est pas le même partout (même pas le même entre individus)



    A partir de la si on poursuit une politique du tout contrôle continu, ben ça se fait au détriment de l’efficacité d’enseignement nécessairement.



    La solution “républicaine” est très propre, on apprend chaqu’un dans son coin et un examen en fin de lycée évalue eu niveau national. On pourrait mettre plus d’examen nationaux si on voulait évaluer plus finement.



    Mais ce qui se passe, c’est qu’un sélection plus arbitraire ( à mon sens ) s’opère en amont, sur dossier et algorithmes obscurs et le résultat de l’examen propre est devenu inutile.



    &nbsp;Alors, pour reprendre la notion d’“élitisme républicain”, moi je le comprenais comme une élite de personnes évalués comme performantes (les élèves), pas comme groupes de gens évalués comme statistiquement performants (les promotions issues des établissements).

    &nbsp;

    Et pour revenir à cette histoire de publication des évaluations statistiques des établissements (nan parce que c’est le sujet au fond), j’ai honnêtement peur que ca amplifie l’effet de spéculation sur l’établissement. Cette manière de pondérer les établissement est un mauvais indicateur, et il est moyennement dangereux tant qu’il est secret mais quand on le publie on crée une évaluation globale des élèves en fonction de leur parcour. Et cette évaluation est fondé sur rien par dessus le marché.



    … Au fait je suis pour cette publication … et je prie pour que des gens intelligent règlent les problèmes qu’elle posera … vite s’il vous plait.&nbsp;


Ça serait plutôt de prendre d’autres à compétences potentiellement moindre pour atteindre un quota arbitraire.