DeepSeek v4、簡単な子供向け問題すら解けない？

[名無しさん]

Redditのr/LocalLLaMAで、DeepSeek v4が簡単な子供向けの論理問題を解けないという投稿が話題になっていました。
最新モデルでも基本的な推論でつまずくケースがあるようです。みなさんはどう思いますか？

[名無しさん]

うちでも試したけど、確かに簡単な算数問題で間違えることがある。

[名無しさん]

「リンゴが3個あって、2個もらったら全部でいくつ？」みたいな問題でも間違えたって書いてあった。

[名無しさん]

子供向けってどのレベルの問題？具体的に知りたい。

[名無しさん]

小1レベルの足し算とか、簡単なパターン認識らしい。深層学習って意外とこういうのが苦手なんだな。

[名無しさん]

v3からそんなに進歩してない気がする。ベンチマークだけ上がって実用は変わらず。

[名無しさん]

でもコード生成は結構使えるよ。推論とコードは別物なのかも。

[名無しさん]

確かに。Pythonの簡単なスクリプトなら大体合ってる。でも論理パズルはダメだ。

[名無しさん]

ローカルLLMの限界かな。クラウドのAPIはもっと賢い？

[名無しさん]

GPT-4oでも似たようなミスあるよ。ただ、DeepSeekは特に顕著って感じ。

[名無しさん]

そもそもv4って正式リリースされたの？

[名無しさん]

どうやら内部テスト版らしい。Redditの投稿者が先行アクセス持ってたみたい。

[名無しさん]

それならまだ改善される可能性あるね。でも問題の本質は変わらないかも。

[名無しさん]

学習データにそういう問題が少ないんだろうな。データセットの偏りが原因かと。

[名無しさん]

でも子供向け問題ってネットに大量にあるはず。学習してないのが不思議。

[名無しさん]

個人的には、こういう話題が出るたびにAGIはまだ遠いなと思う。

[名無しさん]

同意。単なるパターンマッチングに過ぎないってことの証拠。

[名無しさん]

ローカルで動かす分にはコスパ良いから、とりあえずv3でも十分かな。

[名無しさん]

そうそう。完璧じゃなくても使える場面は多い。過度な期待は禁物。

[投稿者]

投稿