Comprendre les Transformers et les mécanismes d'attention

แชร์
ฝัง

ความคิดเห็น • 55

  • @MachineLearnia
    @MachineLearnia 3 ปีที่แล้ว +43

    Quel plaisir de revoir une vidéo de ta part sur TH-cam !

    • @FloNocode
      @FloNocode 3 ปีที่แล้ว +2

      En espérant que ce soit le début d'une longue série de vidéo :D.

    • @elouatimohamed3792
      @elouatimohamed3792 3 ปีที่แล้ว +1

      En manque bq tes vedio machine learnia

    • @lucienkahozi3314
      @lucienkahozi3314 2 ปีที่แล้ว

      nous aimerions aussi que tu fasses une video sur le sujet, ta pedagogie et tes animations sont vraiment utile Machine Learnia. Merci

  • @renemiche735
    @renemiche735 3 ปีที่แล้ว +1

    merci. J'attendais une vidéo sur le sujet en français depuis longtemps et je suis d'autant plus heureux que ce soit toi qui la traite, car tu es un excellent pédagogue.

  • @MsBowner
    @MsBowner ปีที่แล้ว +2

    Excellent Thibault !

  • @boukaryouedraogo9554
    @boukaryouedraogo9554 3 ปีที่แล้ว +2

    Bon retour Thibault.

  • @arishali9248
    @arishali9248 3 ปีที่แล้ว +2

    You deserve more views and more subscribers, I am in love with your channel !!

  • @joslinmartinez9218
    @joslinmartinez9218 3 ปีที่แล้ว +1

    Cette vidéo et le live coding que tu as fais sont de grande qualité et m'ont permis de comprendre cette architecture et la façon dont on peut coder ce genre de choses ! Merci beaucoup :)

  • @jeanpeuplu3862
    @jeanpeuplu3862 2 ปีที่แล้ว

    13:17 : ASMR pour penser à nous hydrater ; merci 🥰

  • @sargan7851
    @sargan7851 3 ปีที่แล้ว +1

    Content de revoir des vidéos ... et le son est super bon.

  • @Leo-hi3to
    @Leo-hi3to 3 ปีที่แล้ว +1

    Content de te revoir !!

  • @alainrieger6905
    @alainrieger6905 3 ปีที่แล้ว

    Merci Monsieur pour tout ce que vous rendez accessible

  • @MachineLinguist
    @MachineLinguist 3 ปีที่แล้ว +5

    Merci pour cette vidéo 🙏. C’est super bien expliqué.

  • @alh7839
    @alh7839 2 ปีที่แล้ว

    c'est si clair, bien dans les détails en expliquant bien des notions complexes, gg

  • @arminsmajlagic2907
    @arminsmajlagic2907 2 ปีที่แล้ว

    I'm learning french and deep learning at the same time with you :D Thank you very much, well explained.

  • @moussabamba6216
    @moussabamba6216 3 ปีที่แล้ว +1

    Super vidéo et bien expliquée , merci pour ce tuto , on attend le TP

  • @abderrahmanemabroukmerabet9274
    @abderrahmanemabroukmerabet9274 3 ปีที่แล้ว

    Ce que tu fais est supe, continue c'est tres bien detaillé

  • @ahmedel-azharjebbari8806
    @ahmedel-azharjebbari8806 3 ปีที่แล้ว +1

    Très bien expliqué !

  • @hassanaghdaoui5138
    @hassanaghdaoui5138 3 ปีที่แล้ว +1

    Sujet très intéressant , super vidéo

  • @denisbories
    @denisbories 3 ปีที่แล้ว +3

    Merci beaucoup pour ces explications claires 👏 Les propositions d’une séance de live coding ou une autre vidéo qui rentrerait dans les détails d’autres applications sont aussi intéressantes l’une que l’autre donc l’idéal serait de faire les 2 😬😇😷

  • @arishali9248
    @arishali9248 3 ปีที่แล้ว +1

    Amazing video, thanks for the explanation

  • @hadjerhamidou1586
    @hadjerhamidou1586 2 ปีที่แล้ว

    Merci pour ces explications

  • @cedricmanouan2333
    @cedricmanouan2333 3 ปีที่แล้ว +1

    Heureux de te revoir TN 😏

  • @anthos.8097
    @anthos.8097 2 หลายเดือนก่อน

    Le mec explique mieux que mes profs au MIT 💀

  • @adrien123_
    @adrien123_ 3 ปีที่แล้ว +1

    Super vidéo, sujet très intéressant !

  • @14Tyrion
    @14Tyrion 3 ปีที่แล้ว +2

    Très bon travail !! Effectivement un TP pratique serait le bienvenu =)

  • @bradleyadjileye1202
    @bradleyadjileye1202 2 ปีที่แล้ว +1

    Merci pour cette vidéo

  • @laurentpourchot4649
    @laurentpourchot4649 3 ปีที่แล้ว +3

    Hello, merci pour cette video. Un exemple avec keras (ou Pytorch) serait top :-)

  • @vincentb.8743
    @vincentb.8743 3 ปีที่แล้ว +1

    Oui l'application des transformers serait très intéressant

  • @ElMeneniNaima
    @ElMeneniNaima ปีที่แล้ว

    merci beaucoup vraiment 🤍🤍🤍

  • @walidayadi5752
    @walidayadi5752 3 ปีที่แล้ว +1

    BRAVO ! Vidéo TOP !

  • @lucienkahozi3314
    @lucienkahozi3314 2 ปีที่แล้ว

    merci pour cette videos tres instructive bro !

  • @damienbouchabou1311
    @damienbouchabou1311 3 ปีที่แล้ว +3

    Superbe vidéo d'introduction aux transfomers. Je suis très intéressé pas le live coding d'un transfomers en keras. Et aussi très intéressé par l'explication d'application de transformer a d'autres domaines

  • @elouatimohamed3792
    @elouatimohamed3792 3 ปีที่แล้ว +1

    Parfait 😍😍 merci bq

  • @franklouenkam8820
    @franklouenkam8820 3 ปีที่แล้ว

    Merci infiniment😍😍😍

  • @hamadoumossigarba1201
    @hamadoumossigarba1201 7 หลายเดือนก่อน

    Bonjour,
    Merci pour la qualité de la présentation et de clarté dans vos explications. Est -ce que le transformer peut être utilisé pour enregistrer et distribuer des données (codes imei et imsi)?
    Pourrai-je si possible avoir ce papier?

  • @automatescellulaires8543
    @automatescellulaires8543 2 ปีที่แล้ว

    J'adore le premier Transformers. Michael Bay is all you need.

  • @khaberislam8957
    @khaberislam8957 3 ปีที่แล้ว +2

    Merci ..

  • @yacinemamdouh1271
    @yacinemamdouh1271 3 ปีที่แล้ว

    Je comprends pas pourquoi on a 8 têtes d'attention à 32:35 ?
    Merci pour la vidéo

  • @trucsetastucesia
    @trucsetastucesia 10 หลายเดือนก่อน

    salut Thibault , est-ce que tu aurais un schéma où on retrouve en terme simplifié cette suite d'opérations : prompt - token - vecteur - tête d'attention - décodeur ?

  • @bekabd
    @bekabd 3 ปีที่แล้ว +1

    Merci

  • @lz8oo8zl
    @lz8oo8zl 3 ปีที่แล้ว +1

    Je ne comprends pas un truc. A quoi sert réellement le FFN dans l'encoder et le decoder ? Chaque token va passer dans un réseau de neurones mais je ne vois pas ce que ça apporte au modèle. Quel impact ces réseaux ont sur l'information?

  • @benoitmialet9842
    @benoitmialet9842 7 หลายเดือนก่อน

    une question qui me hante : la masked self attention ne devrait intervenir UNIQUEMENT que lors de l'entrainement, car on place en input de decoder une séquence contenant la réponse (les tokens futurs). donc, en quoi la masked self attention intervient durant un processus de génération (une fois le modèle entrainé), puisque les tokens encore non générés n'existent tout simplement pas ? Merci de tout éclairage !

    • @ThibaultNeveu
      @ThibaultNeveu  7 หลายเดือนก่อน +1

      En effet, seulement utile a l'entrainement

    • @benoitmialet9842
      @benoitmialet9842 7 หลายเดือนก่อน

      @@ThibaultNeveu merci je me sens moins seul maintenant 🤣

  • @soelreza1430
    @soelreza1430 3 ปีที่แล้ว

    Salut ! Tes vidéos sont super ! Merci beaucoup
    Dis moi est ce que le mécanisme d’attention peut être utilisé non pas pour le traitement de language mais pour prédire des variables numériques continue comme par exemple pour prédire le kwh d’un compteur électrique qui change toutes les 10s

  • @jean-marcbereder4231
    @jean-marcbereder4231 3 ปีที่แล้ว

    excellent

  • @simonarduin8600
    @simonarduin8600 3 ปีที่แล้ว

    nice

  • @elouatimohamed3792
    @elouatimohamed3792 3 ปีที่แล้ว +1

    Et aussi il faut L'implémentation svp

    • @samuelhamache103
      @samuelhamache103 3 ปีที่แล้ว

      il a donné toutes les informations pour coder. Pas besoin de plus.

  • @Saens406
    @Saens406 2 ปีที่แล้ว

    rien compris

  • @WahranRai
    @WahranRai 2 ปีที่แล้ว +1

    Affreux melange du français et de l'anglais !

    • @lbognini
      @lbognini 2 ปีที่แล้ว

      Les documents d'origine sont en anglais et ce sont des concepts relativement nouveaux. Que voulez-vous qu'il fasse? Commencer par faire du boulot de traduction avant celui d'explication?
      On aurait bien aimé que les papers d'origine soit en français.
      Pour l'heure, souffrons de ce mélange.

  • @blancanthony9992
    @blancanthony9992 2 ปีที่แล้ว

    Merci