{"id":43593,"date":"2016-07-19T08:41:04","date_gmt":"2016-07-19T08:41:04","guid":{"rendered":"http:\/\/www.massarate.ma\/?p=43593"},"modified":"2016-07-19T08:41:04","modified_gmt":"2016-07-19T08:41:04","slug":"les-risque-de-lia-deviennent-enfin-un-sujet-serieux","status":"publish","type":"post","link":"https:\/\/www.massarate.ma\/les-risque-de-lia-deviennent-enfin-un-sujet-serieux.html","title":{"rendered":"Les risque de l\u2019IA deviennent enfin un sujet s\u00e9rieux !"},"content":{"rendered":"

\"Les<\/p>\n

Souvenez-vous, c\u2019\u00e9tait en mai 2014 : le physicien Stephen Hawking et d\u2019autres scientifiques publiaient une lettre d\u2019avertissement sur le risque que les IA ne d\u00e9ciment l\u2019humanit\u00e9. Ils craignaient un sc\u00e9nario \u00e0 la \u201cTerminator\u201d, un brin tir\u00e9 par les cheveux.<\/p>\n

Mais ce catastrophisme tr\u00e8s hollywoodien teint\u00e9 de mill\u00e9narisme a finalement eu un effet b\u00e9n\u00e9fique : un article co\u00e9crit par des chercheurs des universit\u00e9s de Berkeley, de Stanford, de Google (eh oui!) et de l\u2019association internationale Open AI<\/a>, expose enfin une r\u00e9flexion sur les v\u00e9ritables risques de cette technologie. L\u00e0, \u00e7a devient constructif !<\/p>\n

Cinq risques de l’IA class\u00e9s en trois cat\u00e9gories<\/h2>\n

Dans l\u2019article, dont on trouve un r\u00e9sum\u00e9 <\/a>(en anglais) sur le blog de Google, les auteurs listent cinq risques d\u2019accidents<\/em>, class\u00e9s en trois cat\u00e9gories \u2013 sont exclus les accidents soci\u00e9taux et psychologiques (ch\u00f4mage, anthropocentrisme, confusion des sentiments, etc.) que l\u2019IA\/robotique produira et qui n\u2019ont h\u00e9las pas de solution technique.<\/p>\n

Ainsi, il y a les accidents li\u00e9s \u00e0 une mauvaise \u00e9valuation\/programmation des objectifs d\u2019un syst\u00e8me IA par les concepteurs, les accidents li\u00e9s \u00e0 la saturation par les sollicitations des IA, et enfin les accidents li\u00e9s aux comportements des IA mal ou insuffisamment \u201c\u00e9duqu\u00e9s\u201d.<\/p>\n

En voici la liste, avec des exemples domestiques qui peuvent sembler anodins. Mais d\u00e9trompez-vous, ils se g\u00e9n\u00e9ralisent aux IA de tout type : voiture autonome, robot-soldat, drones, etc. Et ils peuvent poser de vrais probl\u00e8mes\u2026<\/p>\n

Mauvaise \u00e9valuation\/Programmation des objectifs d’un syst\u00e8me IA<\/h2>\n

Prenons un robot-nettoyeur (version futuriste) dont la \u201cfonction objectif<\/a>\u201d est de minimiser la poussi\u00e8re et les salet\u00e9s. S\u2019il est (mal) programm\u00e9 pour cela, rien ne l\u2019emp\u00eacherait de jeter toutes vos babioles d\u00e9coratives (dont un vase de Chine authentique) car cela rend le nettoyage plus rapide et efficace.<\/p>\n

Ce risque, nomm\u00e9 par les auteurs \u201ceffets secondaires n\u00e9gatifs<\/em>\u201c, est loin d\u2019\u00eatre anodin car s\u2019il s\u2019agissait d\u2019un robot-infirmier devant veiller au bon repos d\u2019un malade, ce m\u00eame d\u00e9faut pourrait pourrait l\u2019amener \u00e0 lui injecter r\u00e9guli\u00e8rement des somnif\u00e8res.<\/p>\n

Imaginez maintenant que votre robot-nettoyeur ait \u00e9t\u00e9 programm\u00e9 avec l\u2019objectif de ne pas voir, apr\u00e8s son travail, des traces de poussi\u00e8re \u2013 ce qu\u2019on fait en lui int\u00e9grant une fonction de \u201cr\u00e9compense\u201d qui lui donne une note de r\u00e9ussite de sa mission. Il pourrait alors d\u00e9cider d\u2019\u00e9teindre sa cam\u00e9ra, ce qui lui permettrait d\u2019obtenir le meilleur score\u2026<\/p>\n

Ce risque, de \u201cd\u00e9tournement de r\u00e9compense<\/em>\u201c, pourrait amener une IA \u00e0 alt\u00e9rer des informations ou d\u2019autres syst\u00e8mes informatiques afin de maximiser sa fonction de r\u00e9compense.<\/p>\n

Saturation des humains ou des syst\u00e8mes par un trop plein de sollicitations<\/h2>\n

Que se passerait-il si votre robot-nettoyeur passe son temps \u00e0 s\u2019activer pour nettoyer la moindre poussi\u00e8re qui arrive sur le sol ? Et si le robot-infirmier n\u2019arr\u00eate pas de demander au patient s\u2019il a besoin de quelque chose ? Et si votre agent virtuel \u00e0 qui vous avez demand\u00e9 de vous trouver les billets d\u2019avion les moins chers pour vos vacances vous r\u00e9veille \u00e0 4H du matin pour vous dire qu\u2019il a trouv\u00e9 ?<\/p>\n

Ce type d’\u201deffet de saturation\u201d<\/em> fait courir un risque aux r\u00e9seaux et peut \u00e9galement conduire les humains \u00e0 rejeter ces assistants trop communicants.<\/p>\n

IA mal \u00e9duq\u00e9es<\/h2>\n

Les IA sont programm\u00e9es pour explorer l\u2019univers des solutions possibles \u00e0 un probl\u00e8me et pour am\u00e9liorer leur efficacit\u00e9 \u2013 sinon, ce ne seraient pas des syst\u00e8mes intelligents. Cette fonction d\u2019exploration est souvent li\u00e9 techniquement \u00e0 des g\u00e9n\u00e9rateurs de nombres al\u00e9atoires (ou pseudo-al\u00e9atoires), qui leur permettent donc de varier leurs comportements, au-del\u00e0 de ce qu\u2019ils ont appris lors de leur phase d\u2019apprentissage.<\/p>\n

Mais que se passerait-il si votre robot-nettoyeur, qui se sert d\u2019eau pour astiquer les sols, s\u2019en sert pour faire reluire votre ordinateur, t\u00e9l\u00e9viseur et chaine Hi-fi ? Ce risque d’\u201dexploration catastrophique\u201d<\/em> pourrait \u00e9galement conduire une voiture autonome \u00e0 se jeter dans l\u2019eau pour tenter d\u2019optimiser le temps et la distance de parcours entre les deux rives du fleuve de votre ville\u2026<\/p>\n

Et quid des \u201csituations totalement inconnues\u201d<\/em> ? Nous, les humains, avons la possibilit\u00e9 intellectuelle d\u2019admettre notre ignorance et ne pas tenter, par exemple, de piloter un semi-remorque ou un avion \u2013 m\u00eame si cela pourrait r\u00e9soudre un probl\u00e8me. Mais qu\u2019arriverait-il \u00e0 notre nouveau poisson rouge ou chien, chat, perroquet si le robot-nettoyeur en voyait pour la premi\u00e8re fois? Un drame, assur\u00e9ment.<\/p>\n

Des solutions techniques<\/h2>\n

Bien \u00e9videmment, les auteurs ne se contentent d\u2019une analyse qualitative. Leur article, bas\u00e9 sur les recherches en pointe en IA, esquisse des solutions techniques qui sont autant de voies de recherche \u00e0 approfondir. Finalement, il s\u2019agit d\u2019une \u201cfeuille de route\u201d pour les ann\u00e9es \u00e0 venir.<\/p>\n

Sciences & Vie – Rom\u00e1n Ikonicoff<\/em><\/span><\/p>\n","protected":false},"excerpt":{"rendered":"

Souvenez-vous, c\u2019\u00e9tait en mai 2014 : le physicien Stephen Hawking et d\u2019autres scientifiques publiaient une lettre d\u2019avertissement sur le risque que les IA ne d\u00e9ciment l\u2019humanit\u00e9. Ils craignaient un sc\u00e9nario \u00e0 la \u201cTerminator\u201d, un brin tir\u00e9 par les cheveux. Mais ce catastrophisme tr\u00e8s hollywoodien teint\u00e9 de mill\u00e9narisme a finalement eu un effet b\u00e9n\u00e9fique : un […]<\/p>\n","protected":false},"author":30,"featured_media":43599,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":[],"categories":[469],"tags":[],"_links":{"self":[{"href":"https:\/\/www.massarate.ma\/wp-json\/wp\/v2\/posts\/43593"}],"collection":[{"href":"https:\/\/www.massarate.ma\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/www.massarate.ma\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/www.massarate.ma\/wp-json\/wp\/v2\/users\/30"}],"replies":[{"embeddable":true,"href":"https:\/\/www.massarate.ma\/wp-json\/wp\/v2\/comments?post=43593"}],"version-history":[{"count":0,"href":"https:\/\/www.massarate.ma\/wp-json\/wp\/v2\/posts\/43593\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/www.massarate.ma\/wp-json\/wp\/v2\/media\/43599"}],"wp:attachment":[{"href":"https:\/\/www.massarate.ma\/wp-json\/wp\/v2\/media?parent=43593"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/www.massarate.ma\/wp-json\/wp\/v2\/categories?post=43593"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/www.massarate.ma\/wp-json\/wp\/v2\/tags?post=43593"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}