Ollama nạp lại model 214 lần/ngày: thủ phạm là keep_alive
This story is from 2026-09-15. It is preserved in the archive; the latest stories are on the live feed.
Originally published on NextFuture Bạn test app chat local, first token về dưới một giây, ship luôn. Đi ăn trưa về hỏi đúng một câu, con trỏ nhấp nháy mười một giây — cùng máy, cùng model, cùng prompt. Đó không phải model chậm. Đó là Ollama đã unload model khỏi VRAM và đang đọc lại vài GB từ disk.…
Read the full story at DEV Community — AI ↗
Timeline · 1 report
- 2026-09-15 17:00 · DEV Community — AI
Ollama nạp lại model 214 lần/ngày: thủ phạm là keep_alive