Untethered LLM · Panduan model

Model AI Kecil Terbaik untuk iPhone (GGUF) | Untethered LLM

Setiap model di bawah berukuran 6B parameter atau lebih kecil dan berjalan dengan llama.cpp, runtime yang sama dalam aplikasi. Huihui Qwen3 4B Abliterated sudah disertakan bersama Untethered LLM sebagai lalai, dengan Qwen3 4B sebagai model kedua; model lain dalam senarai ini boleh diimport sebagai fail GGUF. Saiz adalah anggaran, dan angka RAM ialah jumlah yang perlu tersedia pada telefon.

Lapan model disemak berdasarkan bajet RAM kelas iPhone
Model Saiz & keperluan Nota
Qwen3 4B
Qwen/Qwen3-4B-GGUF
4B · Q5_K_M · ~2.9 GB · 8 GB+ iPhones A top all-round iPhone model that also ships with the app as the second bundled model: strong chat, reasoning, and tool use.
Gemma 3 4B
unsloth/gemma-3-4b-it-GGUF
4B · Q4_K_M · ~2.5 GB · 8 GB+ iPhones Google's efficient 4B instruction model; clean answers and good multilingual coverage.
Phi-4 Mini
unsloth/Phi-4-mini-instruct-GGUF
3.8B · Q4_K_M · ~2.4 GB · 8 GB+ iPhones Microsoft's compact reasoner; strong math and step-by-step tasks.
Llama 3.2 3B
unsloth/Llama-3.2-3B-Instruct-GGUF
3B · Q4_K_M · ~1.9 GB · 6 GB+ iPhones Meta's small chat model; a balanced pick for older iPhones.
Qwen2.5 3B
Qwen/Qwen2.5-3B-Instruct-GGUF
3B · Q4_K_M · ~1.9 GB · 6 GB+ iPhones Previous-generation Qwen; fast and reliable for everyday chat.
Qwen3 1.7B
Qwen/Qwen3-1.7B-GGUF
1.7B · Q4_K_M · ~1.1 GB · 6 GB+ iPhones Tiny and quick; best for background use and low-memory devices.
SmolLM2 1.7B
HuggingFaceTB/SmolLM2-1.7B-Instruct-GGUF
1.7B · Q4_K_M · ~1.1 GB · 6 GB+ iPhones Featherweight Hugging Face model; sips battery and memory.
DeepSeek-R1 Distill 1.5B
lmstudio-community/DeepSeek-R1-Distill-Qwen-1.5B-GGUF
1.5B · Q4_K_M · ~1.0 GB · 6 GB+ iPhones Reasoning-distilled for puzzles and logic; thinks before answering.

Peta perundangan

Dasar aplikasi sendiri berasingan daripada perisian pihak ketiga yang disertakan dan syarat lesen model yang disertakan, tetapi halaman di bawah ini berpaut antara satu sama lain untuk kejelasan.

Dasar aplikasi kami

Dasar pihak ketiga