DS4: DeepSeek Flash専用推論エンジン、128GB MacBook向けに登場

掲示板 フォーラム AI DS4: DeepSeek Flash専用推論エンジン、128GB MacBook向けに登場

  • このトピックには23件の返信、7人の参加者があり、最後に名無しさんにより1年、 4ヶ月前に更新されました。
23件の返信を表示中(うち親返信15件)
  • 投稿者
    投稿
    • #62769 返信
      名無しさん
      話題のDS4は、DeepSeek Flashモデルに特化した推論エンジンで、128GBメモリのMacBookで動作するそうです。:。ローカルLLMの選択肢が増えて嬉しいですが、Macでのパフォーマンスやコスト面など、皆さんの意見を聞かせてください。

    • #62770 返信
      名無しさん
      これは面白い。128GB MacBookってかなり高額だけど、ローカルでDeepSeek動かせるなら価値あるかも。

      • #62772 返信
        名無しさん
        確かにMacはメモリ帯域幅が広いから、量子化なしでフル精度に近い推論ができるのが利点らしい。

      • #62792 返信
        名無しさん
        そうそう、とりあえず動画で紹介されてるの見たけど、実用的な速度だったよ。ただしセットアップはちょっと面倒そう。

    • #62771 返信
      名無しさん
      でもDeepSeek Flashってモデル自体がそんなに大きくないから、もっと安い構成でも動くんじゃない?

    • #62773 返信
      名無しさん
      個人的にはllama.cppで十分満足してる。DS4の独自実装がどれだけ優秀か気になる。

      • #62776 返信
        名無しさん
        llama.cppと比べて速度がどうかだな。Apple Silicon最適化されてるなら期待したい。

    • #62774 返信
      名無しさん
      ベンチマーク結果が出てないからなんとも言えない。コードは公開されてるの?

    • #62775 返信
      名無しさん
      確かにを見ないと信用できない。でもDeepSeek自体が中国製で、プライバシー面で懸念があるならローカル実行はいい選択かも。

      • #62781 返信
        名無しさん
        プライバシー重視ならローカル一択。でもDeepSeekのエンジンが中国企業製なら、そこも気になる。

    • #62777 返信
      名無しさん
      128GB MacBookって仕事で使ってる人には現実的じゃない。もっと低スペックでも動くようにしてほしい。

      • #62778 返信
        名無しさん
        DeepSeek Flash自体が8Bモデルだから、メモリ12GBでも動くはず。DS4がなぜ128GB推奨なのか疑問。

    • #62779 返信
      名無しさん
      おそらくコンテキスト長を大きく取るためとか?実際に使ってみないとわからない。

    • #62780 返信
      名無しさん
      Redditのコメント見ると、結構好評みたいだね。でも中国のモデルは品質が安定しないイメージ。

    • #62782 返信
      名無しさん
      とりあえず試してみたいけど、128GB Mac持ってない…。クラウドで動かすより電気代は安いかも?

    • #62783 返信
      名無しさん
      DS4はMetalを使ってるんだって。AppleのGPU性能を活かしてるなら、M1 Ultraとかで爆速かも。

      • #62784 返信
        名無しさん
        M1 Ultraのメモリ帯域幅はすごいから、確かに可能性はある。でもM4とか新しいチップはどうなんだろう。

    • #62785 返信
      名無しさん
      個人的にはMacでLLM動かすより、LinuxマシンにGPU積んだ方がコスパいいと思う。

    • #62786 返信
      名無しさん
      こういう特化エンジンが増えるのはいい傾向。汎用より速いし省メモリのはず。

      • #62787 返信
        名無しさん
        でも特化しすぎて汎用性がないと、一つのモデルしか動かせないのは不便。

    • #62788 返信
      名無しさん
      そもそもDeepSeek Flashってモデルの性能はどうなの?ちょっと前に出たR1の方が話題だった気が。

      • #62789 返信
        名無しさん
        Flashは軽量版で、コード生成には使えるみたい。ベンチマークでは悪くなかった。

    • #62790 返信
      名無しさん
      オープンなら自分でビルドできるけど、バイナリ配布だけならちょっと抵抗ある。

    • #62791 返信
      名無しさん
      英語の情報ばかりだから、日本語で議論できるのはありがたい。実際に試した人いたらレポートしてほしい。

23件の返信を表示中(うち親返信15件)
返信先: DS4: DeepSeek Flash専用推論エンジン、128GB MacBook向けに登場で#62772に返信
あなたの情報:




AA
tchmii
タイトルとURLをコピーしました