DeepSeek 4をノートPCで動かせる? 実際のところどう?

掲示板 フォーラム AI DeepSeek 4をノートPCで動かせる? 実際のところどう?

  • このトピックには25件の返信、8人の参加者があり、最後に名無しさんにより1年、 2ヶ月前に更新されました。
25件の返信を表示中(うち親返信13件)
  • 投稿者
    投稿
    • #68146 返信
      名無しさん
      Redditのr/LocalLLaMAで「Can I run DeepSeek 4 on my laptop?!」というスレッドが立っていました。DeepSeek 4を手持ちのラップトップで動かしたいという質問で、スペックや量子化、代替モデルについてのやり取りがあったようです。ローカルLLMの敷居が下がってきたとはいえ、まだまだメモリとVRAMが壁ですね。皆さんはDeepSeek 4をローカルで試しましたか?

    • #68147 返信
      名無しさん
      DeepSeek 4ってパラメータ数いくつだっけ?7Bくらいならノートでも行けるかも?

      • #68149 返信
        名無しさん
        いや、7Bでも量子化なしじゃ16GBじゃキツイよ。8bit量子化ならいけるかも。

    • #68148 返信
      名無しさん
      多分MoEで総パラメータは大きいけど、活性化されるのは一部だからメモリはそこまで必要ないって話もある。

      • #68151 返信
        名無しさん
        MoEって推論時のメモリフットプリントが小さいらしいけど、それでもDeepSeek V3はかなり重いって聞いた。

    • #68150 返信
      名無しさん
      実際に動かしてる人いる?ベンチマークとか気になる。

      • #68153 返信
        名無しさん
        自分はRTX 3060 12GBでDeepSeek Coder 6.7B動かしてる。コード生成なら満足。

    • #68152 返信
      名無しさん
      ノートPCで動かすならllama.cppが鉄板。GPU使えればなお良し。

      • #68154 返信
        名無しさん
        llama.cppの量子化ってどのくらい品質落ちる?

        • #68156 返信
          名無しさん
          Q4_K_Mくらいなら実用上問題ないってよく言われる。自分もQ5で使ってるけど違和感ない。

    • #68155 返信
      名無しさん
      コスト面で言うと、API使った方が安い場合もあるよね。でもプライバシー重視ならローカル一択。

    • #68157 返信
      名無しさん
      DeepSeek 4ってリリースされたばかり?情報少ないな。

      • #68158 返信
        名無しさん
        Redditのスレでもまだベンチマーク出てきてないっぽいね。実際に試した人のレポート待ち。

    • #68159 返信
      名無しさん
      ノートPCで動かすならRAM32GB以上は必須だと思う。

      • #68160 返信
        名無しさん
        同意。自分は64GBにしてるけど、余裕あると安心。

    • #68161 返信
      名無しさん
      そもそもDeepSeek 4って公開されてるの?最新はV3とかR1じゃ?

      • #68162 返信
        名無しさん
        スレタイがDeepSeek 4になってるけど、実際はV3とかの誤記かもね。

    • #68163 返信
      名無しさん
      あんまり大きなモデルをローカルで動かす意味ある?クラウドでいいじゃんって思う。

      • #68164 返信
        名無しさん
        データが外部に出ない安心感は大きいよ。特に仕事のコードとか。

    • #68165 返信
      名無しさん
      MacのMシリーズだとユニファイドメモリが強みだから、DeepSeekも動かしやすいって聞いた。

      • #68166 返信
        名無しさん
        M1 Max 64GBでllama 70B動かしてる人いるしね。

    • #68167 返信
      名無しさん
      結局、お金とプライバシーのトレードオフだな。

      • #68168 返信
        名無しさん
        ローカルでも小さいモデルなら充分使えるし、最近の量子化技術すごいよ。

    • #68169 返信
      名無しさん
      とりあえず自分はllama.cppのビルドから始めてみるわ。

      • #68170 返信
        名無しさん
        頑張って!Modelファイルのダウンロードに時間かかるけどな。

    • #68171 返信
      名無しさん
      DeepSeekに限らず、ローカルLLMはこれからもっと普及すると思う。ハードウェアも進化してるし。

25件の返信を表示中(うち親返信13件)
返信先: DeepSeek 4をノートPCで動かせる? 実際のところどう?で#68171に返信
あなたの情報:




AA
tchmii
タイトルとURLをコピーしました