Lumaktaw sa nilalaman
Bumalik sa listahan ng mga artikulo
ai3 min

Context Language Models: mga model na nag-e-edit ng sariling context, mas tumpak at mas tipid

Context Language Models: models that edit their own context gain accuracy and spend less

KGA IT
2026-10-123 min
AIMetaAgentsLLMResearchOpen Source
Capa: Context Language Models gerenciam o próprio contexto

Ang ideya

Napupuno ng mga agent na matagal tumatakbo ang kanilang context; ang solusyon ngayon ay galing sa labas ng model. Iminungkahi ng papel sa arXiv noong Setyembre 29, 2026 (University of Washington, Meta, MIT, Trillium Labs), na iniulat ng InfoQ noong Oktubre 11, ang Context Language Models (CLM): file ang context na malayang isinusulat muli ng model. Code sa GitHub (facebookresearch/context-language-models).

Resulta

  • Zero-shot: +11.4% accuracy sa BrowseComp-Plus na may 21.5% mas kaunting FLOPs; +5% sa 12-oras na EdgeBench na may 59% mas kaunting FLOPs.
  • RL: Qwen3.5-9B mula 28.8% tungo 42.5%.
  • Suffix Cache Reuse: 35% mas kaunting server compute.

Mga paalala

Maaaring itapon ang mahalagang impormasyon, ang editable context ay bagong daan ng prompt injection, at nasisira ang cache sa pagsulat muli.

Para sa gumagawa ng agents

  1. Ang context ay gastos.
  2. Subukan ang context strategies.
  3. Context = attack surface.
  4. Bantayan ang cache.

Mga pinagmulan


Gusto mo bang i-optimize ang gastos at reliability ng iyong AI agents? Nag-aalok ang KGA IT ng libreng konsultasyon: kga-it.com.

Sama-sama nating lutasin ang inyong technical challenges.

Ang KGA IT Solutions ay may dalubhasang team sa AI, cloud at DevOps upang maghatid ng pinakamabuting solusyon sa inyong hamon.

Makipag-ugnayan