Nemotron 3 Super adalah model AI berat terbuka yang dirancang untuk tugas agentik multi-langkah, menggabungkan beberapa inovasi arsitektur untuk efisiensi dan akurasi unggul dibandingkan rekan-rekan di kelasnya Berikut 10 kekuatan utama diringkas dari data teknis terbaru dan patokan

1 Skala besar, Aktivasi langka
Model ini memiliki total 120 miliar parameter, tetapi hanya mengaktifkan 12 milyar per token melalui arsitektur Latent Mixture-of-Experts (MoE), yang secara drastis mengurangi biaya komputasi.

2 1M Native Context Window
Ini mendukung hingga 1 juta token dalam konteks secara alami, memungkinkan agen untuk mempertahankan keadaan tugas jangka panjang tanpa terdorong oleh tujuan

3 5x Percepatan Pengembangan Kekuatan
Inferensi throughput 5x lebih tinggi dari Nemotron Super sebelumnya, terutama pada Blackwell B200 GPU

4 Indeks Kecerdasan Teratas
Ini memimpin Indeks Kecerdasan Analisis Buatan dengan 3637 poin, melampaui model terbuka seperti GPT-OSS-120B (33 poin) dan hanya tertinggal yang lebih besar seperti Qwen3 5 122B

5 Peringkat Benchmark Excellence Agentik
Tes khusus agen menonjol: PinchBench 85 6% (top di antara rekan terbuka), SWE-Bench dengan OpenHands 60 47%, MMLU-Pro 83 73%, dan TauBench V2 61 15%

6 Prediksi Multi-Token
Multi-Token Prediction (MTP) memprediksi beberapa token per pass, memungkinkan spekulatif dekoding yang mempercepat generasi kode dan tugas terstruktur hingga 3x

7 Efficient Latent MoE
Latent MoE kompresi token sebelum routing ahli, mengaktifkan 4x lebih banyak ahli dengan biaya komputasi yang sama untuk domain khusus seperti Python / SQL terpisah

8 Efisiensi Pretraining NVFP4
Pretraining dari awal di NVFP4 (4-bit float) pada Blackwell, mengurangi kebutuhan memori dan meningkatkan inferensi 4x lebih FP8 pada H100 tanpa kehilangan akurasi

9 RL Multi-Environment yang Kuat
Dilatih melalui Multi-environment RL di NeMo Gym pada 21 setup dengan 1 2M+ rollout, memastikan perilaku yang stabil dalam alur kerja agen kompleks

10 Sumber Terbuka Lengkap
Model bobot, dataset, dan pelatihan / resep awal terbuka di bawah NVIDIA Nemotron Open Model License, yang dapat didownload dari Hugging Face dan bisa dijalankan melalui NIM, vLLM, atau TensorRT-LLM

Diagram ini menggambarkan inti arsitektur Mamba-Transformer-MoE hibrida untuk efisiensi Nemotron 3 Super