Qwen3 4B NemotronIF Reasoning SFT

01できること

04インストール

インストール Ollama お使いのOS向け。ダウンロード前にモデルと量子化を確認してください。まずはコンテキストを4096トークンに設定し、その後、ollama ps でモデルの配置先を確認してください。以下にコマンドが記載されていることは、お使いのマシンでテストが実行された証拠にはなりません。

02必要なメモリ

このモデルを動作させるためのGPU VRAMの概算値（4kトークンのコンテキストオーバーヘッドを含む）。より長いコンテキストが必要な場合は、8kトークンごとに約1 GBを追加してください。

Qwen3 4B NemotronIF Reasoning SFTに必要なハードウェアは？

Qwen3 4B NemotronIF Reasoning SFTをQ4量子化でローカル実行するには、VRAM 2.3 GB程度が必要です。比較候補：RTX 5060 Ti 16GB (ASUS Prime) — システムとコンテキスト用のメモリに余裕を持たせ、推論エンジンがGPUに対応していることを確認してください。

外出先では： Qwen3 4B NemotronIF Reasoning SFT 〜でも動作します RTX搭載ノートPC (16 GBのVRAM) →

03予想速度

Q4_K_M、コンテキスト 4k での毎秒生成トークン数。 20 t/sを超えると快適に読めます。 10 t/s未満では、試用にとどまります。