연구에서는 Delta N-gram을 제안한다: 언어 모델의 원생 N-gram 테이블을 위한 전방향만 가능한 지속적 쓰기 방법
2026년 10월 24일, arXiv는 논문 arXiv:2610.31125v1을 발표하여 Delta N-gram을 제안했다. 이는 사전 학습된 N-gram 테이블 T⁰을 수정하지 않고, 전방향 전파를 통해 희소한 증분 패치 Δ만을 기록하는 새로운 메커니즘으로, 효율적이고 가역적인 지속적 기억 업데이트를 지원한다.
추천 이유：이 연구는 지속 학습에서 모델의 기초 파라미터 변동이 크다는 문제를 해결하기 위해, 구조가 경량화되어(4.1M 파라미터) 계산 효율성이 높으며(순수 전방향), 완전히 역변환 가능하여(Δ를 초기화하면 원래 모델로 복원됨) 기억을 강화하는 경로를 제안하고, Qwen3.8-Flash-Next와 같은 모델에서 문서 특이성과 간섭 저항성이 더욱 우수함을 검증하였다. 이는 최첨단 신뢰성 AI 시스템 연구에 해당한다.