【深層学習】GPT-3 ①-2 追加学習なしでタスクに対応する仕組み【ディープラーニングの世界vol.39-2】

แชร์
ฝัง
  • เผยแพร่เมื่อ 1 ม.ค. 2025

ความคิดเห็น • 33

  • @松尾安希
    @松尾安希 3 ปีที่แล้ว

    ありがとうございます!

    • @AIcia_Solid
      @AIcia_Solid  3 ปีที่แล้ว

      どういたしまして!(^o^)

    • @AIcia_Solid
      @AIcia_Solid  2 ปีที่แล้ว

      すみません!!!🙇‍♀️🙇‍♀️🙇‍♀️
      いま、このコメントが Super Thanks であることに気づきました!🙇‍♀️🙇‍♀️🙇‍♀️🙇‍♀️🙇‍♀️
      ご支援いただきありがとうございます!😍
      今後も良き動画を生成していきますので、応援いただけると嬉しいです!🔥🔥
      よろしくお願いします!(^O^)

  • @ayatsukiluna7608
    @ayatsukiluna7608 3 ปีที่แล้ว

    あけましておめでとうございます! 今年も可愛い!

    • @AIcia_Solid
      @AIcia_Solid  3 ปีที่แล้ว

      でしょ!😍
      あけおめことよろです!
      今年も可愛く行きます!(^o^)

  • @アイスクリーム-j2y
    @アイスクリーム-j2y 3 ปีที่แล้ว

    あけましておめでとうございます。いつも素敵な動画をありがとうございます。

    • @AIcia_Solid
      @AIcia_Solid  3 ปีที่แล้ว

      あけおめです!
      今年も頑張りまーす!(^o^)

    • @アイスクリーム-j2y
      @アイスクリーム-j2y 3 ปีที่แล้ว +1

      @@AIcia_Solid あ、いつも頑張ってらっしゃるので、頑張らなくていいです!

  • @神田空太-x3i
    @神田空太-x3i 3 ปีที่แล้ว +3

    あけおめ~。
    相変わらずポップにお勉強できるあなたの動画が好きです!
    私は4月から社会人ですが、つよつよ目指していきます!

    • @AIcia_Solid
      @AIcia_Solid  3 ปีที่แล้ว +1

      ご視聴コメントありがとうございます。
      嬉しいです!(^o^)
      ぜひ、一緒に世界を面白くしていきましょー!(^o^)😍

  • @koyohand7522
    @koyohand7522 2 ปีที่แล้ว +1

    In Context Learning って多分大学入試の現代文解いてたら、その内容で書かれてる言語論みたいなものについて軽く勉強できちゃったみたいなアレですよね。笑
    DeepLearningの世界最初から見始めてここまで きてめちゃくちゃ楽しいです!いつもありがとうございます!

    • @AIcia_Solid
      @AIcia_Solid  2 ปีที่แล้ว

      おおー!
      たくさんご視聴コメントありがとうございます!😍🎉🎉
      そうなんです、なかなか面白い概念ですよね😍

  • @310ksk6
    @310ksk6 ปีที่แล้ว

    GPT-3の本質がよくわかったような、ある意味わからないことがわかったような、いい解説でした
    FS,OS,ZSは結局のところ、それ用のアーキテクチャを作って成し遂げたというより、パラメータの暴力でよくわかんないけど相転移したんじゃないかってのが今の所の理解であってますでしょうか?
    More is differentって格言がありますけど、それを彷彿とさせるエピソードになりそうですね。

    • @AIcia_Solid
      @AIcia_Solid  ปีที่แล้ว

      ご視聴コメントありがとうございます!
      私もなんとなくそんな理解でいます。
      ここ1年くらいは、研究者の方が More is Different と言われる頻度が高まった気がしています👀

  • @kentoo_1
    @kentoo_1 3 ปีที่แล้ว

    TwitterにもGPT-3製のアカウントが潜んでいるかもしれませんね ハッ…アイシアちゃんもしかして…!
    空気読んで続きの文章書かせるのはまさにAIのべりすとですね!

    • @AIcia_Solid
      @AIcia_Solid  3 ปีที่แล้ว

      わたしの GPT は108式まであります😎😎😎✌️

  • @薩摩守-j2f
    @薩摩守-j2f 3 ปีที่แล้ว +1

    あけましておめでとうございます。今年もよろしくお願いいたします。
    動画を楽しく拝見しました。いつもありがとうございます。
    リアルタイムで拝見できず、ごめんなさい。
    質問があります。
    GPT-3の画像版ってあるんでしょうか?ViTと呼ばれるものがそれにあたるのでしょうか?
    あらかじめ事前学習しておいて、Few Shot、One Shot、Zero Shotで画像分類をしてくれると、
    すごくうれしいのですが、現在そういった画像処理AIはありますか?
    モデルを公開してくれているなら、よりうれしいんですけど…
    聞いてばかりで、ごめんなさい。

    • @AIcia_Solid
      @AIcia_Solid  3 ปีที่แล้ว

      コメントありがとうございます!
      動画は見たいときに見ていただければ良いと思いますYO!
      画像分類を少データでやりたい、、、という話であれば、転移学習が数年前から実用化されています!
      Amazon rekognition とか Google Vision API などを調べてみるとよいかと思います!(^o^)

    • @薩摩守-j2f
      @薩摩守-j2f 3 ปีที่แล้ว

      @@AIcia_Solid ご返信と温かいお言葉をいただき、ありがとうございます。
      お教えいただいた2つのキーワードを、まずは調べてみます。
      キーワードをお教えいただき、本当にありがとうございました。
      動画の続きも楽しみにお待ちしております。

  • @ハク-p8h
    @ハク-p8h 3 ปีที่แล้ว +2

    あけおめです!GPT-3が非常にパワフルだと理解しました。1つ質問なのですが、このまま自然言語処理が超発展するとGPTに入力した数学の定理の証明などはされるのでしょうか?

    • @AIcia_Solid
      @AIcia_Solid  3 ปีที่แล้ว

      わかりません!
      ただ、できるようになるんじゃないでしょうか🤔
      入試問題の計算、証明問題なら東ロボくんの時代からできていますし、特に致命的に不可能と言えるような障害はない気もします🤔🤔🤔

  • @observer8379
    @observer8379 3 ปีที่แล้ว +2

    あけましておめでとうございます。数式まみれのデータセットで学習して既存の定理証明プログラムより高性能になったりしたら面白そうです

    • @AIcia_Solid
      @AIcia_Solid  3 ปีที่แล้ว +1

      あけおめことよろです!🎍🎉
      方向性は違いますが、最近 AI くんが結び目理論の幾何的量と代数的量の間の不等式を発見したりしていましたね👀👀👀

  • @sylk5366
    @sylk5366 ปีที่แล้ว

    最近ChatGPTのブームにともないGPT3勉強しててここにたどり着きました!わかりやすくて最高です!ありがとうございます!
    少し気になったのですが、モデルの学習時にはプロンプト的な文章は使われたりしているのでしょうか?
    具体的には
    "Translate English to Japanese"
    a => A
    という風の辞書みたいなデータを意図的に学習データに混ぜているのでしょうか?
    それとも、混ぜなくても勝手にプロンプトベースの入出力ができてしまうのでしょうか?
    "次の単語を予測する"という学習だけでプロンプト的な作業ができてしまうのが不思議で夜も寝れません。よろしくお願いします

    • @AIcia_Solid
      @AIcia_Solid  ปีที่แล้ว +2

      ご視聴コメントありがとうございます!
      お役に立てて光栄です!🎉
      ご質問にお答えします!
      が、ここは、プロの研究者にとっても不思議な領域で、きっと彼らもかれこれ3年ほど寝てないんじゃないと思います😱
      あくまで私の想像でお答えしますが、
      基本的には、わざわざそのようなデータを加えることはしていないと思います。
      ですが、ネット上の膨大なテキストのなかで、例えば問題集の回答とか、プログラミングのなかのドキュメントなどで、似た形の文章がある程度あったりするんじゃないかと思います。
      そういうのも学習することで、対応力を身に着けたんじゃないかと思っています🤔

  • @JJ-rc5db
    @JJ-rc5db 2 ปีที่แล้ว +1

    In:動画の感想を述べよ。
    Out:たくさんTH-cam 見てきたけど、一番の衝撃だったかもしれない
    とんでもない時代に生まれちゃったなぁ。。。

    • @AIcia_Solid
      @AIcia_Solid  2 ปีที่แล้ว +1

      アイシア「それはとても良かったです!動画を生成したかいがありました!」

  • @to1347
    @to1347 3 ปีที่แล้ว

    人間も子供の頃に言葉を覚えるのと同時にいろいろな技能を習得しているので、AIが言語学習だけで算数できるようになるのも理に適っているのかな?
    それを踏まえると、僕たちが言語能力と関係ないと思っていたいろんな能力って単なる言語能力の一部なのかもね

    • @AIcia_Solid
      @AIcia_Solid  3 ปีที่แล้ว

      そうかもしれませんね!
      認知発達ロボティクスという分野では、機械が学習していくさまを見ながら、人間の認知発達の過程に思いを馳せます。楽しくておすすめの分野です!(^o^)

  • @manabirisu
    @manabirisu ปีที่แล้ว

    つよつよーーー\(^^)/

    • @AIcia_Solid
      @AIcia_Solid  ปีที่แล้ว +1

      ですよねー!🤩

  • @LUCKY-eu3nq
    @LUCKY-eu3nq 3 ปีที่แล้ว

    アイシア様、ご無沙汰しております。お忙しいところ恐縮ですがこちらの動画をよくご覧になっていただきたいです。
    th-cam.com/video/OoRmeMdSdvU/w-d-xo.html
    GPTで生成した文章がおかしいという現象で、よくあることだとは思いますが、今の技術でこれを少なくすることはできるでしょうか?
    もしくはGPT以外(BERTなど)を使えば少しはマシになるとか、解決法はありますか?

    • @AIcia_Solid
      @AIcia_Solid  3 ปีที่แล้ว

      うーーーーーーーん🤔🤔🤔
      私はこの意見、あまり賛同しません。
      まだまだ改善の余地があることは事実ですが、そこまで悪く言わなくてもいい気がします🤔
      あと、英語ならもっと普通にすごいと思います👀