スレッド概要
「DeepSeek R1とV3を同一サーバーで同時実行できる?」についてのスレッドです。DeepSeekのモデルはローカルLLMとして人気ですが、両方を同時に動かすのは現実的なのか? ハードウェア要件やVRAM、コスト面も含めて議論しましょう。 27件の返信で意見交換されています。
- このトピックには27件の返信、9人の参加者があり、最後に名無しさんにより2年、 10ヶ月前に更新されました。
27件の返信を表示中(うち親返信18件)
-
投稿者投稿
-
-
名無しさんRedditのr/LocalLLaMAで「Can I run DeepSeek R1 and DeepSeek V3 simultaneously on the same server?」という質問が投稿されていました()。DeepSeekのモデルはローカルLLMとして人気ですが、両方を同時に動かすのは現実的なのか?ハードウェア要件やVRAM、コスト面も含めて議論しましょう。
-
名無しさん無理じゃない?VRAMが何TB必要になるか想像もつかない
-
名無しさんVRAMはR1の671Bだと1台じゃ無理、マルチGPU構成必須
-
-
名無しさんR1は1.5Bならなんとか、V3は量子化しないと無理
-
名無しさんコスト考えたらクラウド使ったほうが安い気がする
-
名無しさんでもローカルじゃないと遅いし、プライバシー的に不安
-
-
名無しさん実際にやってる人いるの?ベンチマークが知りたい
-
名無しさんReddit見たら何人か挑戦してるけど、推論速度は悲惨らしい
-
-
名無しさん42Bくらいのモデルなら同時に2つくらい余裕
-
名無しさんR1はそもそも42Bないしな。V3は671Bだもん
-
-
名無しさんサーバー用途なら専用機用意するのが当たり前
-
名無しさんDeepSeekってコード生成強いから両方動かして併用したいんだろうな
-
名無しさんコードならR1のほうが得意って話もあるけど
-
-
名無しさん量子化版なら可能かもしれない。GGUFで頑張れ
-
名無しさんGGUFでもVRAM 48GBじゃR1動かないよ
-
-
名無しさんプロジェクトによってはモデル切り替えでいいのでは?
-
名無しさん同時実行の意味がわからん、API叩けばいいじゃん
-
名無しさんオフラインで使いたいケースもあるんでしょ
-
-
名無しさんハードウエア投資するならH100とか?一般人には無理
-
名無しさんH100でもR1とV3同時はきついと思う
-
-
名無しさんそもそもV3は推論特化、R1は思考モデルで性格違う
-
名無しさん役割分担したいなら同時じゃなくてもいい気が
-
-
名無しさんやってみたいけどお金が…
-
名無しさんDeepSeekの新しいモデルはどんどん重くなるからなあ
-
名無しさん2台サーバー用意するのが現実的
-
名無しさんGPUクラスタをレンタルする手もあるが
-
名無しさん個人的にはR1の小型版だけで十分
-
名無しさん情報ありがとう、Redditのスレも参考になる
-
-
投稿者投稿
27件の返信を表示中(うち親返信18件)
関連するAIトピック
- DeepSeek V3でコード監査エージェント作ったってのスレ。AST解析+ハイブリッド検索でシニア級らしい。20件の返信最終更新 2023年8月3日 16:32
- DeepSeek V4とBaiduのKunlunxinチップに関するの投稿を見つけた18件の返信最終更新 2023年7月21日 15:17
- Qwenが32B/235Bベースモデルを非公開に、DeepSeekへの蒸留対策か?15件の返信最終更新 2023年10月16日 19:20
- DeepSeek-R1-Qwen3-8bのトークナイザーをQwen3 30b A3bにコピーできる?17件の返信最終更新 2023年10月16日 17:34
- DeepSeek-R1-0528-Qwen3-8BのOpenVINO量子化バージョンが公開されたらしい19件の返信最終更新 2023年10月16日 15:53