1
サスケ
0post
2025.11.29 15:00
:0% :0% (30代/女性)
人気のポスト ※表示されているRP数は特定時点のものです
イリヤ・サスケバー氏のパテル氏によるインタビュー。
現在のモデルは評価指標で非常に優れた性能を示しているにも関わらず、他方では特定の条件下では単純なミスをし、全く同じ誤りを2回も繰り返すという理解しがたいことが起きている。
この現象についての説明として、強化学習の訓練方法がモデルを単一志向にしてしまい、基本的なタスク能力が落ちている可能性。また、事前学習の時代には、学習に使用するデータは多様であらゆるものが自由に使えたが、強化学習の場合はどのような環境・目標で学習するかで汎化性能が制限される。
さらに、こうした中で意図せずに開発者がモデル性能を可能な限り良くしたいという報酬ハッキングが行われているということ。
このように、事前学習によっても、強化学習によっても汎化は達成できていない。さらには事前学習の動作原理はまだまだ理解できていない。
人間が学習する際には何らかの価値関数が有効に働いており、フィードバックが効いているおかげで高い汎化と効率的な学習ができている。例えば、人間における価値関数としては(知覚できるものとしては)感情といったものがあるが、現在のMLには、このような人間における価値関数の類似物はまだ存在していない
また、強化学習の文脈における価値関数は強化学習の効率性を単に向上させることに役に立つが、人の場合のおいて、この価値関数のようなものをを使うことでずっと優れた汎化性能の獲得や頑健な学習に役立っている。
さらに、人間のサンプル効率は圧倒的に高い。10時間も車を運転すれば誰でも十分に運転できるようになる。このような効率的な学習手法は人が実現しているので、存在は確かだが、まだどのように実現するかはわかっておらず研究が必要である
また、継続的な学習の重要性を重視している。人間自身も膨大な知識はもっておらずAGIではない。その代わりに人間は継続的な学習に依存し様々なことができるようになっている。
同様にAIとして目指すのは「非常に意欲的な15歳の超知能」である。知識はほとんどないが、非常に優秀な学生で、常に学び続け、プログラマにも医師にも、あらゆる職業になれるようなものだ。AIとして知識をもった完成品を投入するのではなく、何らかの学習と試行錯誤の期間を含んだ形でAIは展開されていく。
研究においてある程度の計算リソースが必要であることは確かだが、最も大規模なリソースが必要なわけではない。
将来的に飛躍的にAIの能力が向上したとき、そのAIがどのような姿になるのかを誰もが想像することが非常に難しい。またそれに応じて社会や人々ばどのようになるのかを想像することは難しい。実証して初めてみたときに分かる。
コメント
===
このインタビューではサツケバーのAGIや今後についてを自由に述べたもので興味深かった。何点か回答を避けた部分などは既にある程度の構想があり、検証を進めていくのだろう。
現在の機械学習の学習機構は基本的に教師あり学習と強化学習に依存しており、LLMは特に事前学習(次トークン予測)での多様な環境での教師あり学習と、一部の限られた環境での強化学習に依存しており、指摘の点はそのとおりである。
今回のインタビューでは特に、価値関数(人間における感情や、さらに高次のフィードバック機能)について多くの言及があった。ただ、今の強化学習や価値関数を改善していくというレベルではなく、今の教師あり学習や強化学習の枠組みとは違った形での学習機構(学習の概念自体も変える)を見つけていくことが重要ということであり、この部分には私も同意である。
タイトルでは「スケールの時代」から「研究の時代」とされているもののSSI自体も4500億円近くを調達し、手法の検証を進めている。こうしたことから、正確には「スケールすればどこまでも性能改善する」という時代から、「研究で新しい手法を探していく必要はある。そこでは世界最大の計算資源は必要ないが、かなりの計算資源を使って試行錯誤していく必要がある」ということだろうか November 11, 2025
2RP
ナルトのフィギュア5体セット出てた〜!サスケとカカシ並べたらもう部屋が忍界すぎてヤバい😂
リポップライズ ナルト フィギュア 5体セット
https://t.co/33l4SURUjZ November 11, 2025
え、このNARUTOのTシャツ、ナルトとサスケが戦ってるデザインだって! しかも第7班全員集合とか、最高じゃん…! ブラックボディにシルクスクリーンとか、マジで欲しい…!🤤✨
NARUTO疾風伝 ナルト サスケ アニメTシャツ naruto sasuke
https://t.co/qsQOlG2Ui2 November 11, 2025
@sasukezaemon52 サスケざえもんさん🥰💖こんにちぃたん😆🌟初めてのステージ楽しかったよ〜☺💓くるくるまるまった猫ちゃん可愛い〜😻二ャンコパワーありがとにゃん🐱︎💕︎︎ November 11, 2025
ナルトとヒナタって、ナルトはサクラのこと好きみたいなのあったけど、それはサクラがサスケのこと好きでそれにに対抗するため見たいな考察?あった気がする。
ヒナタは小さい頃からナルトのこと好きだったし、作者様は別にヒナタが人気だからって理由でヒロインにしたわけではないような... November 11, 2025
@YamashiroHonami FF外から失礼します。
岸本先生はヒナタが人気だからナルトの相手をヒナタに決めたのではありませんし、ナルトがサクラを好きに見えたのもサスケへの対抗心で恋心ではないんですよね。公式CPで当然だと思います。 November 11, 2025
岸本先生はヒナタが人気だからナルトの相手をヒナタに決めたのではないよ。「ヒナタはナルトが最初から頑張ってるところをちゃんと見て、ずっと応援していた唯一の子なんです」とインタビューで答えてた。
あとナルトがサクラに恋心あるように見えたのはサスケへの対抗心で恋ではなかったです。 https://t.co/oaiPswpTaw November 11, 2025
NARUTO疾風伝
マダラが色々話してる
ゼツ アァロエだとぅ?
サスケ万華鏡やん!イタチでもいいん?
あれ、トビってマダラなん?
結局九尾は口寄せ?天災?
イタチの初登場はダンゾウへの威圧?わーお
イタチに恋人?初耳
?しかない笑笑
#アニメ好きな人と繋がりたい https://t.co/vR1vRjbebW November 11, 2025
NARUTO疾風伝
キラービー八尾化
諸ポ
サスケ 木ノ葉を潰す
↑なんでなんで笑後目ふゅわんふゅわん
ビー強すぎ笑笑インフレ入ったりする?
ブラザーはだーれ?
二尾以来?ちゃんとコントロールしてそうなの
四尾も人柱力だったかドワーフみたいなん
#アニメ好きな人と繋がりたい https://t.co/lrcWecu5s0 November 11, 2025
<ポストの表示について>
本サイトではXの利用規約に沿ってポストを表示させていただいております。ポストの非表示を希望される方はこちらのお問い合わせフォームまでご連絡下さい。こちらのデータはAPIでも販売しております。



