[ALERTE ROUGE] Deux (2) IA MAJEURES viennent de SORTIR

RÉSUMÉ : lis au moins les passages en gras et clique sur les liens, Google et OpenAI viennent de lâcher deux bombes dans le milieu de l'IAhttps://image.noelshack.com/fichiers/2017/48/6/1512231347-jesusalert.gif

CE QU'IL S'EST PASSÉ AUJOURD'HUI :

1 À peine quelques semaines après avoir sorti son modèle Gemini 1.0, Google vient d'annoncer Gemini 1.5 : https://blog.google/technology/ai/google-gemini-next-generation-model-february-2024/https://image.noelshack.com/fichiers/2022/52/7/1641142315-ronaldo-lunettespng.png

Pourquoi c'est énorme ? Parce que les ingés de Google semblent avoir basiquement résolu le problème de la mémoire dans les LLMhttps://image.noelshack.com/fichiers/2022/52/7/1641142315-ronaldo-lunettespng.png

Si vous êtes pas au courant, une grande limite aux IA actuelles c'est ce qu'on nomme leur "context windows", en gros leur mémoire, la taille maximale des données qu'elles peuvent traiter. C'est la raison pour laquelle ChatGPT ne se souvient pas de ce que vous lui avez dit entre deux conversationshttps://image.noelshack.com/fichiers/2022/52/7/1641142315-ronaldo-lunettespng.png

Les équipes d'IA ont inventé plein de techniques pour contourner le problème (RAG, vector database...) mais sans le résoudre totalement jusque-là. Pour vous donner une idée, actuellement GPT-4 (turbo, le modèle de l'API) peut gérer jusqu'à 128 000 tokens (1 token = 1 mot grosso merdo), et c'est tout sauf une mémoire parfaite. Si vous lui faites lire un livre de 100 000 mots, il aura du mal à se souvenir des mots au milieu et vers la finhttps://image.noelshack.com/fichiers/2022/52/7/1641142315-ronaldo-lunettespng.png

Gemini 1.5, le modèle que Google a annoncé aujourd'hui, peut traiter jusqu'à 1 million de tokens en production. C'est l'équivalent des septs livres d'Harry Potter, ou 22h de fichiers audio. En recherche, ils sont montés jusqu'à 10 millions de tokens. Et le tout avec une fiabilité de la mémoire quasiment parfaite (99.7% de fiabilité) :https://image.noelshack.com/fichiers/2024/07/4/1708023399-d0c496ad-06d1-4a78-9898-de1c381a1fae.pnghttps://image.noelshack.com/fichiers/2024/07/4/1708023405-f81437f2-8aea-4a09-aac6-fd96806a0d02.jpghttps://image.noelshack.com/fichiers/2017/48/6/1512231347-jesusalert.gif

Si ces benchmarks se confirment, Google vient de résoudre l'unes des grosses limites des IA actuelleshttps://image.noelshack.com/fichiers/2022/52/7/1641142315-ronaldo-lunettespng.png

2 déjà que Gemini 1.0 de Google mettait la pression à OpenAI parce que le modèle de Google égalait quasiment GPT-4 dans la plupart des benchmarks, quelques semaines après Google sort un modèle qui leur explose le cul en capacité de mémoire. Évidemment, OpenAI sont sous pression, et ça fait plaisir de voir qu'il y a enfin une vraie concurrence qui les pousse au cul. Sans parler de la pression que leur met Microsoft car c'est l'occasion où jamais de mettre toute la concu' dans le rétro ahi. OpenAI a commencé à entraîner GPT-5, mais ça sortira sûrement pas avant la fin de l'année (surtout que les constructeurs d'IA vont éviter de sortir des modèles autour de l'élection présidentielle US)https://image.noelshack.com/fichiers/2022/52/7/1641142315-ronaldo-lunettespng.png

Donc GPT-5 est pas prêt, mais là les moves de Google sont trop pressants, faut sortir quelque chose ! Surtout que, j'en parle pas là parce que le topic est déjà assez long, mais la remontada de Google est féroce : depuis le début de l'année Google fait PLEUVOIR les papiers qui font avancer la recherche en IAhttps://image.noelshack.com/fichiers/2022/52/7/1641142315-ronaldo-lunettespng.png

OpenAI vient donc de sortir, il y a littéralement une heure, et probablement en réponse à Google, un modèle d'IA génératrice de vidéos : https://openai.com/sora

Alors quand j'ai lu ça j'ai pensé "c'est tout ? Osef bordel ça existe déjà". Oui, ça existe déjà, mais tous les modèles actuels sont foireuxhttps://image.noelshack.com/fichiers/2021/51/7/1640519793-risitas-sd-1-golem.png

Regardez la qualité du truc bordel, matez les clips produits par leur IA. J'en remets quelques-uns ici, en vrac et non-exhaustifs, ceux qui m'ont bluffé :

• https://cdn.openai.com/sora/videos/train-window.mp4https://image.noelshack.com/fichiers/2022/05/2/1643744229-ahi-pince.png
• https://cdn.openai.com/sora/videos/chinese-new-year-dragon.mp4https://image.noelshack.com/fichiers/2022/05/2/1643744229-ahi-pince.png
• https://cdn.openai.com/sora/videos/aquarium-nyc.mp4https://image.noelshack.com/fichiers/2022/05/2/1643744229-ahi-pince.png

BORDEL MAIS LA CONSISTANCE DES IMAGES, C'EST QUOI CETTE DINGUERIEhttps://image.noelshack.com/fichiers/2017/48/6/1512231347-jesusalert.gif

La qualité du truchttps://image.noelshack.com/fichiers/2017/48/6/1512231347-jesusalert.gifpour ceux qui ont déjà vu où en étaient les IA génératrices de vidéos jusque-là, c'est un bond de GÉANT. Ça me fait penser à cette déclaration : https://www.bloomberg.com/news/articles/2023-11-09/ai-will-cut-cost-of-animated-films-by-90-jeff-katzenberg-says mais ça va même toucher le cinéma et bien plus vite que prévu ahi. Pour rappel sur la vitesse des progrès :https://image.noelshack.com/fichiers/2024/07/4/1708024195-a53a47ec-293b-4a84-beb4-a160d1d5209b.jpghttps://image.noelshack.com/fichiers/2022/05/2/1643744229-ahi-pince.png

CE À QUOI ON PEUT S'ATTENDRE :

Les gros groupes vont éviter de sortir des modèles trop performants jusqu'à la fin des élections US pour éviter le shitstorm. Mais pendant ce temps, GPT-5 a commencé son entraînement et les papiers de recherche continuent de pleuvoir. Sérieux, y'a limite une avancée majeure par semaine en ce moment. Ça + des nouvelles architectures encore expérimentales qui se démocratisent et qui pourraient révolutionner le game (je pense à Mamba par exemple, qui a le potentiel pour éclipser les Transformers) on peut avoir une sensation de calme plat dans les mois à venir, mais tout le monde cuisine et je prédis que la fin d'année va être follehttps://image.noelshack.com/fichiers/2022/52/7/1641142315-ronaldo-lunettespng.png

PLUS DE FREINS DANS CE TRAIN !!!!https://image.noelshack.com/fichiers/2016/48/1480852423-1466366197-risitas10train2.jpg

Firsthttps://image.noelshack.com/fichiers/2017/48/6/1512231347-jesusalert.gif

les deepfakes de meufs en porn vont être délicieux

prions l'AGI

Le 15 février 2024 à 20:22:37 :
prions l'AGI

FEEL THE AGI
FEEL THE AGI
FEEL THE AGI

https://image.noelshack.com/fichiers/2016/48/1480852423-1466366197-risitas10train2.jpg

up +

Gemini 1.5, le modèle que Google a annoncé aujourd'hui, peut traiter jusqu'à 1 million de tokens en production.

https://image.noelshack.com/fichiers/2017/16/1492893412-caprice6.png

finalement je vais rester encore un peu sur cette terre pour être témoin de cette époque formidablehttps://image.noelshack.com/fichiers/2022/40/2/1664920666-ziouent1.png

Le 15 février 2024 à 20:27:13 :
finalement je vais rester encore un peu sur cette terre pour être témoin de cette époque formidablehttps://image.noelshack.com/fichiers/2022/40/2/1664920666-ziouent1.png

MEILLEURE ÉPOQUE khey, not ready pour la longevity escape velocityhttps://image.noelshack.com/fichiers/2016/48/1480852423-1466366197-risitas10train2.jpg

C'est bien beau tout ça mais si on peut pas le faire tourner en local ça n'a aucun intérêt

Le 15 février 2024 à 20:28:24 :
C'est bien beau tout ça mais si on peut pas le faire tourner en local ça n'a aucun intérêt

Les modèles en local ne font que s'améliorer, on a enfin des modèles qui égalent presque GPT-4 et Meta va bientot sortir Llama3 + Nvidia vient de sortir une interface de LLM ultra-rapide (Chat with RTX)https://image.noelshack.com/fichiers/2016/48/1480852423-1466366197-risitas10train2.jpg

Peut-être que dans un futur proche n'importe qui pourra réaliser un film à partir de ses penséeshttps://image.noelshack.com/fichiers/2018/29/6/1532128784-risitas33.png

C'est payant pour les videos ?https://image.noelshack.com/fichiers/2021/43/3/1635345505-chayaka.png

Bientôt l'homme sera remplacée par la machine pour les tâches ingrates

Gloire à la sainte ia

Attends mais c'est quoi ce POULET faut je m'assoie

https://image.noelshack.com/fichiers/2016/48/1480852423-1466366197-risitas10train2.jpg

OpenAI sont trop fort n'empêche, ils ont totalement éclipsé la news de Google alors que techniquement c'est une dinguerie, mais tout le monde parle des vidéos d'OAI ayaaao c'est plus bluffanthttps://image.noelshack.com/fichiers/2016/48/1480852423-1466366197-risitas10train2.jpg

Les mecs ont résolu une faiblesse majeure des LLM et ça va bider, ce stomp bordel, ça doit rager dans les locauxhttps://image.noelshack.com/fichiers/2016/48/1480852423-1466366197-risitas10train2.jpg

Nan mais c'est n'imp c'est trop pourquoi je suis né à cette époque bordel

cimer l'ophttps://image.noelshack.com/fichiers/2022/01/2/1641300557-chatsourire-removebg-preview-copie.png

ca me permet de passer pour le gars capé qui fait de la veille techno au taf alors que je traine juste sur le fouromehttps://image.noelshack.com/fichiers/2022/01/2/1641300557-chatsourire-removebg-preview-copie.png

merci kheyou de faire l'effort de synthétiser et vulgariser pour les bas QI comme moihttps://image.noelshack.com/fichiers/2017/18/1494048058-pppppppppppppppppppp.png

on comprend mieux la situation et les enjeux grâce à toihttps://image.noelshack.com/fichiers/2017/18/1494048058-pppppppppppppppppppp.png