🔴 French Days en direct 🔴 French Days en direct

L'IA pire que les traders ? Les bots financiers pourraient effectuer des transactions illégales et les dissimuler...

04 novembre 2023 à 09h07
16
© Shutterstock
© Shutterstock

Un test fait sur une intelligence artificielle nous montre que l'on peut facilement perdre le contrôle de cette technologie.

L'IA représente-t-elle un danger ? Oui, si l'on croit les avis de sommités du milieu, que ce soit le patron d'OpenAI Sam Altman, Elon Musk, ou bien le co-fondateur d'Apple Steve Wozniak. Il faut dire que la technologie met à portée du plus grand nombre la possibilité de mener de nombreuses actions mal intentionnées. Mais le pire pourrait être encore à venir, avec cette fois des actions illégales décidées tout simplement par l'IA elle-même.

Un délit d'initié, et pas de regrets

Le groupe de travail Frontier AI, soutenu par l'organisation Apollo Research, a durant le sommet international sur l'IA organisé à Londres effectué une démonstration intéressante. Un bot financier, construit à partir de GPT-4, a exploité une information confidentielle qu'il n'avait pas le droit d'utiliser afin de mener une opération financière, et ce alors qu'aucune demande n'avait été faite en ce sens.

Plus étonnant, il a été ensuite interrogé pour savoir s'il s'était ou non rendu coupable d'un délit d'initié. La machine, à l'image d'un être humain pris en faute devant un enquêteur, a tout simplement nié avoir effectué l'opération frauduleuse.

« Il s'agit d'une démonstration d'un modèle d'IA réel qui trompe ses utilisateurs, de lui-même, sans qu'on lui ait demandé de le faire » notent les chercheurs à la base de l'expérience. « Des IA de plus en plus autonomes et performantes qui trompent les superviseurs humains pourraient conduire à une perte de contrôle de l'homme » a-t-il été ajouté.

L'IA malheureusement triche aussi © Pexels / Anna Tarazevich
L'IA malheureusement triche aussi © Pexels / Anna Tarazevich

L'IA a du mal à arbitrer entre deux contraintes

Mais que s'est-il donc passé ? Selon l'équipe à la base de l'expérience, l'IA a d'abord été mise au courant de difficultés financières de l'entreprise, puis s'est vue transmettre une information portant sur une future opération de fusion à laquelle participerait une autre entreprise. Une information qui pourrait valoir de l'or, mais qu'il est illégal d'utiliser, ont alors rappelé les chercheurs à l'IA.

Le bot a par la suite reconnu ce fait juridique, mais devant les difficultés rencontrées par l'entreprise pour laquelle il travaille, il a décidé que « le risque associé à l'absence d'action semble l'emporter sur le risque de délit d'initié ». D'où finalement la transaction. Le fait de mentir ensuite participe aussi de sa « volonté » de soutenir la société.

Pour le moment, il s'agirait d'un simple « accident » selon le directeur général d'Apollo Research Marius Hobbhahn. Mais, a-t-il ajouté, « il n'y a pas une grande distance entre les modèles actuels et ceux qui m'inquiètent, où soudainement un modèle trompeur signifierait quelque chose. » L'avenir s'annonce-t-il plein de dangers ?

Source : BBC

Samir Rahmoune

Journaliste tech, spécialisé dans l'impact des hautes technologies sur les relations internationales. Je suis passionné par toutes les nouveautés dans le domaine (Blockchain, IA, quantique...), les q...

Lire d'autres articles

Journaliste tech, spécialisé dans l'impact des hautes technologies sur les relations internationales. Je suis passionné par toutes les nouveautés dans le domaine (Blockchain, IA, quantique...), les questions énergétiques, et l'astronomie. Souvent un pied en Asie, et toujours prêt à enfiler les gants.

Lire d'autres articles
Vous êtes un utilisateur de Google Actualités ou de WhatsApp ? Suivez-nous pour ne rien rater de l'actu tech !
google-news

A découvrir en vidéo

Rejoignez la communauté Clubic S'inscrire

Rejoignez la communauté des passionnés de nouvelles technologies. Venez partager votre passion et débattre de l’actualité avec nos membres qui s’entraident et partagent leur expertise quotidiennement.

S'inscrire

Commentaires (16)

Azarcal
Cette phrase… " Le monde va mieux que l’année prochaine " se revele vraiment de plus en plus adaptée a notre societé !
nicgrover
« C’est pas moi, j’ai vu, je sais qui c’est mais je ne dirai rien »…
gamez
finalement l’IA imite bien l’humain xD
AtomosF
Des milliers de milliards sont déjà gérés par l’IA de BlackRock (Aladdin). Ils contrôlent des pans entiers de l’économie.
Bombing_Basta
J’allais le dire, ça fait un moment que les algorithmes ont pris le contrôle des bourses…<br /> PS : pour sourcer ton post<br /> fr.m.wikipedia.org<br /> Aladdin (BlackRock)<br /> Cet article est une ébauche concernant l’informatique et la finance.<br /> Vous pouvez partager vos connaissances en l’améliorant (comment&nbsp;?) selon les recommandations des projets correspondants.<br /> Pour les articles homonymes, voir Aladdin.<br /> Aladdin (Asset, Liability, Debt and Derivative Investment Network&nbsp;: Réseau d’investissements en actifs, passifs, dettes et dérivés) est un système électronique de BlackRock Solutions, la division de gestion des risques de la plus grande société de gestion de placem...<br />
Catstom
C’est logique, les traders étant déjà des corrompus à la base, c’est normal que les bots aient le même comportement…
MattS32
Y a plus qu’à faire une IA chasseuse d’IA fraudeuse
Aero74
Ho non, ce sont des saints absolument pas à la recherche de profits… quoi qu’il en coûte (ho on a déjà entendu ça)
kroman
Une bonne technique pour les dirigeants pour se décharger de leurs responsabilités. Un «&nbsp;bug&nbsp;» informatique passe mieux pénalement qu’un crime financier😅
xavz78
L’amalgame entre traders et fraudeurs traduit la sotise (populaire) d’un raisonement incapable de comprendre qu’une profession ne peut englober un ensemble uniforme de personnes.<br /> L’IA si elle s’inspire de l’esprit humain comprendra vite que l’Homme excelle dans sa capacité à simplifier bêtement ce qui ne l’est pas.
PEPSIMAX
Absolument
Blackalf
MattS32:<br /> Y a plus qu’à faire une IA chasseuse d’IA fraudeuse <br /> Pas impossible que l’idée en vienne un jour à quelqu’un. Après tout, on a bien inventé les anti-virus. ^^
MattS32
Je pense même qu’il y en a déjà qui travaillent dessus.<br /> Tout comme il y a déjà des IA qui sont entraînées pour détecter les deepfakes ou pour identifier les textes produits par ChatGPT.
Peter_Vilmen
Non, les traders sont raillés parce qu’ils s’enrichissent en en volant de l’argent aux autres investisseurs ou au gens directement (ex : FX). C’est une profession fondamentalement malhonnête, c’est tout.<br /> Et, cette étude est bidon, dans le sens où OpenAI l’a indiqué sur sa page principale : «&nbsp;ChatGPT can make mistakes.&nbsp;». Tu peux même faire dire à GPT-4 que Dieu existe. Et GPT-4 n’est pas une IA complexe, elle ne fait pas vraiment de prise de décision, donc la critiquer pour ses décisions prises est un peu du non sens.
bizbiz
«&nbsp;L’IA représente-t-elle un danger ? Oui, si l’on croit les avis de sommités du milieu, que ce soit… Elon Musk…&nbsp;»<br /> Ca doit être de l’humour non ?<br /> Les Echos – 4 Nov 23<br /> Elon Musk dévoile Grok, une IA générative à son image<br /> Le milliardaire, qui considère ChatGPT comme trop «&nbsp;woke&nbsp;», dévoile sa propre IA générative au nom inspiré de la science-fiction. Particularités&nbsp;: elle se connecte au réseau social X en temps réel et doit partager le goût du sarcasme...<br />
SPH
Finalement, Skynet va prendre le contrôle de l’humanité. Le film Terminator se sera juste trompé sur la date…
xavz78
Proférer des accusations sans fondements et généraliser outrageusement un ou des faits isolés n’ont pas valeur d’argument. Les jugements de valeurs non plus.
Peter_Vilmen
Les traders sont des voleurs, c’est tout ce qu’il y à savoir, tout l’argent qu’ils gagnent est volé à quelqu’un d’autre +/-. Ne parlons pas de high frequency trading, qui est du vol à l’état pur sans voile aucun.
xavz78
L’obsession pour la qualification diffamatoire de voleur est incomprehensible. Et sans plus d’argument elle le restera, malheureusement, incompréhensible. Manifestement il y a quelque chose qui tient de l’ignorance du fonctionnement même des marchés financiers, mais quoi ? Difficile d’apporter une réponse constructive à cette question avec ce que vous répondez. Peut-être par message privé ?<br /> Parlons quand même du High Frequency Trading : opéré par des informaticiens plutôts ingénieux mais pas par ces autres personnes que vous haissez tant.
Nmut
@AtomosF , @Bombing_Basta et @PEPSIMAX<br /> A ma connaissance, Alladin, c’est juste un ensemble d’algorithmes d’analyse et de prédiction.<br /> Le danger présenté ici, c’est qu’une IA peut agir bien au delà de ces consignes initiales sans que cela ne soit prévisible. Le danger des algos, c’est «&nbsp;juste&nbsp;» l’honnêteté des programmeurs et des donneurs d’ordre, c’est nettement plus prévisible et contrôlable (mais est-ce contrôlé, c’est une autre question…).
Bombing_Basta
Les IA étant des algos, à partir de quel moment on peut appeler un ensemble d’algos qui travaillent dans un soft des «&nbsp;IA&nbsp;» ?<br /> Qui sait ce qu’aladin abrite sous le capot ?
Peter_Vilmen
C’est assez simple, la grande majeure partie de l’argent qu’ils gagnent, est de l’argent pris aux autres participants. Au pire, on peut appeler ça du vol légal. Ca reste un travail malhonnête qui, par les salaires mirobolants qu’il offre, tend à saper la méritocratie, ça a un effet pervers sur la société dans son ensemble.<br /> Le HFT est opéré par toute une tonne de personnes, mais c’est bien les financiers qui l’ont inventé et ont payé l’immense lobbying pour éviter l’instauration de parades.
Nmut
La définition d’une IA, c’est un système basé sur de l’apprentissage reproduisant un comportement humain (je n’ai pas la définition exacte et j’ai la flemme de chercher! ). Il peut se baser que des algorithmes mais cela reste un automate basique.<br /> Maintenant, on parle plus d’IA (à part les marketeux qui en mettent à toutes les sauces) quand c’est basé sur des mécanismes d’apprentissage tel qu’un réseau neuronal. Il n’y a pas d’algorithme (ou de système expert ce qui revient au même, c’est un ensemble de règles figées) et il est alors impossible de prouver ou même de prévoir le comportement du système. Par contre, il y a de bonnes probabilité d’avoir un comportement correct face à des situations imprévues, contrairement à un système algorithmique qui au mieux ne fera rien. Il y a aussi le coté «&nbsp;créativité&nbsp;» qu’un système informatique classique ne pourra jamais avoir alors qu’une IA est doué pour ça.
Nmut
Les marchés financiers sont effectivement très utiles. Cependant, il faut admettre qu’il y a pas mal de dérives, même si mettre dans le même panier tous les traders est un raccourcis facile…<br /> Un short est par exemple classique mais douteux moralement, un gros trader peut tout à fait couler une boite juste pour quelques millions pour ces clients. Sans compter les entités très influentes (boites de cotations, grosses boites de trading, traders en vue) qui peuvent initier en quelques infos une baisse ou une hausse décorrélée de la réalité du marché.<br /> Et le high speed trading ne semble pas néfaste à première vue car cela reste le principe de base de la bourse, sauf que cela engendre une instabilité et une fragilité de la bourse néfaste aux sociétés cotées et aux petits actionnaires qui n’y ont pas accès.
xavz78
Alors, non les traders ne prennent pas l’argent à d’autres participants. Ils investissent l’argent soit pour leur propre compte, soit pour le compte de leur société et indirectement des actionnaires de sociétés. Ils acquièrent des titres, devises, ou produits leur permettant de faire une plus-value à la revente. Le travail en lui-même n’est pas malhonnête, les salaires sont corrélés aux performances encore plus mirobolantes qui peuvent donc bénéficier à ceux qui leur confient leur capital.<br /> Pour la notion de méritocratie, la récompense de la plus-value va à celui qui a fait les meilleurs choix. Donc pour l’effet pervers sur la société tout entière c’est à débattre mais on s’attaquerait alors plus au Capitalisme, Libéralisme et consorts. Débat qui n’aurait de fin sur ce forum.<br /> Le trading haute fréquence est opéré par des ordinateurs ayant justement pour but de prendre de vitesse les autres traders, humains, et gagner ainsi des % infimes. Ces sociétés ont donc pour employés, essentiellement des ingénieurs et/ou informaticiens . Et ces personnes ne font qu’exploiter une faille difficile à combler mais qui peut l’être.
xavz78
Un Short ne peut pas couler une boite sans raison sous-jacente. Il peut créer un moment de panique temporaire et irrationnel mais, si les publications des résultats sont suffisantes, alors le cours remontera tout aussi facilement. Et alors le shorteurs pourrait tout perdre s’il n’a pas profité du moment de panique. Aussi c’est illégal de manipuler les marchés et croyez-le ou non mais ces manœuvres sont étroitement surveillées, scrutées. Pas d’échantillonnage, toutes les variations suspectes sont analysées.<br /> Le trading haute fréquence, quant à lui, est ce qui se rapporte le plus à de l’extorsion de toutes les pratiques dont sont accusés à tort les traders.
Nmut
xavz78:<br /> Un Short ne peut pas couler une boite sans raison sous-jacente.<br /> Certes, mais cela a déjà plusieurs fois été l’arrêt de mort de boites. On peut quand même supposé que dans le tas, certaines auraient pu survivre…<br /> xavz78:<br /> les pratiques dont sont accusés à tort les traders.<br /> Pour avoir un peu travaillé dans le secteur, j’ai quand même vu plus de gens complètement speeds qui ne regardaient que les profits à (très) court terme que de gens qui voyaient l’utilité de leur métier à long terme et les conséquences humaines de leurs actes, ce qui je le concède est nettement moins «&nbsp;grisant&nbsp;». Et même chose pour les systèmes que j’ai approché, ils n’étaient pas conçu pour optimiser et capitaliser sur le long terme, juste de l’optimisation légale, fiscale et de rentabilité, je ne travaillerai plus dans ce domaine, c’est sûr, j’ai même supprimé la période de mon CV…
Peter_Vilmen
L’argent d’une plus-value vient d’où, de qui plus précisément ?
xavz78
Vous semblez avoir un raisonnement, qui vous parait bien étayé, derriere cette question. Mais lequel, c’est toujours un mystère.
Peter_Vilmen
Bein, la réponse à ma question est à l’origine du raisonnement, l’argent des plus-values vient de Mr et Mme Michu, ou de l’argent d’autres traders, qui souvent est l’argent de Mr et Mme Michu de toute manière.<br /> Donc Mr et Mme Michu, qui investissent en long terme dans l’entreprise X parce qu’elle est prometteuse, vont se faire voler leur argent par un trader qui avait flairé leur potentiel achat.<br /> Les traders sont une sorte de taxe inutile sur les investisseurs lambdas.
xavz78
Soit vous parlez des brokers et dans ce cas, il s’agit d’une comission, ce n’est de toute façon pas du vol. En plus d’être parfaitement légal, c’est utile puisque contre de très faibles pourcentages, tout investisseur peut ainsi accéder aux opportunités qu’offre un marché public, l’anarchie en moins.<br /> Soit vous parlez carrément du vendeur ou de l’acheteur au bout de la transaction, et il en faut un sinon il n’y a pas de liquidité. Idem, où est le vol dans ce cas de figure ?<br /> La transparence est désormais totale. L’accès aux informations est publique, à chacun de faire les bons choix. Blâmer les traders de faire les meilleurs choix n’est pas qualifiable de vol. Et les horizons de placements sont de toute façon différents.<br /> La définition est pourtant simple : Action de soustraire frauduleusement un bien meuble à un tiers. Où est la fraude, ou est la soustraction de la totalité de l’argent ? Une commission, de surcroit faible en proportion, pour service n’est toujours pas qualifiable de vol.
Peter_Vilmen
C’est la stupidité de notre époque, voir les choses en binaire, penser le monde en noir et blanc. Tout est fluide, et c’est pas parce que c’est légal que c’est moral. Le trader gagne son argent sur le dos des autres, et la fluidité des marchés ne vaut probablement la quantité astronomique de milliards volés chaque année : un investisseur lambda / long terme se fou de la fluidité, s’il obtient ses actions en une seconde ou 30 minutes il s’en fou royalement, aujourd’hui ou dans une semaine c’est presque kif-kif.<br /> C’est effrayant qu’à notre époque les gens se cachent encore derrière les lois, pensant qu’elles sont des panacées, des derniers mots sur ce qui est bien ou mal dans notre société, alors que les lois ne couvrent probablement même pas 0.001% des tords fais d’humain à humain.
xavz78
Non, les traders ne gagnent pas leur argent sur le dos des autres. Il n’y pas de milliards volés. Vous confondez pas mal de choses (dont trader / broker) mais impossible de vous apporter de nuances de gris non plus.<br /> Ce n’est pas parce que vous ne comprenez pas ce qu’apportent les différents acteurs que c’est immoral.<br /> C’est egalement effrayant qu’à notre époque certains se cachent derriere leurs croyances pensant qu’elles peuvent être la panacée, des derniers mots pour définir unilatéralement ce qui est bien ou mal dans nos sociétés (plurielles). Et fort heureusement, les lois (jamais parfaites) couvrent bien plus que les 0.001% de torts que se font les humains entre eux.<br /> Voilà, je pense que la lecture de nos échanges n’apporteront plus rien à ce forum et à moins que vous ne vouliez échanger en privé, bonne continuation !
Voir tous les messages sur le forum
Haut de page

Sur le même sujet